关于此职位
关于 Turing
Turing 总部位于美国加利福尼亚州旧金山，是全球领先的前沿 AI 实验室研究加速器，也是为部署先进 AI 系统的全球企业提供支持的值得信赖的合作伙伴。Turing 通过两种方式为客户提供支持：第一，通过高质量数据、先进的训练流水线，以及专注于编码、推理、STEM、多语言能力、多模态和智能体的顶尖 AI 研究人员，加速前沿研究；第二，运用这些专业能力，帮助企业将 AI 从概念验证转变为专有智能，使系统可靠运行、产生可衡量的影响，并在损益表（P&L）上带来持久的成果
职位概述
我们正在寻找经验丰富的数据分析师（MLE Bench），参与以基准测试为导向、聚焦真实世界机器学习系统的评估项目。该职位需要亲自使用类生产环境的数据集、指标和 ML 输出开展分析工作，以帮助评估、诊断并提升先进 AI 系统的性能。
理想的候选人能够自如地在数据分析与机器学习的交汇处工作，具备严谨的分析能力，并能够处理真实数据集和 ML 评估工作流。
日常工作是什么样的？
- 分析由 ML 训练、推理和评估流水线产生的结构化和非结构化数据集。
- 定义、计算并验证用于评估模型性能和行为的指标。
- 调查与基准测试任务相关的数据分布、模型输出、失败模式和边缘案例。
- 编写并运行 Python 和 SQL 代码，以分析数据、创建报告并支持评估工作流。
- 验证各数据集和实验的数据质量、一致性与正确性。
- 创建清晰、文档完善的分析产出物和可复现的分析工作流。
- 与 ML 工程师和研究人员协作，为 MLE Bench 设计具有挑战性的真实世界评估场景。
要求
- 作为数据分析师或偏分析方向的工程师，至少拥有 3+ 年经验。
- 精通用于数据分析的 Python。
- 在 SQL 和关系型数据集方面有扎实的经验。
- 有分析 ML 输出和评估指标的经验。
- 对统计学和分析推理有深入理解。
- 能够处理大型、复杂的数据集并得出可靠的洞察。
- 有编写整洁、可读且文档完善的分析代码的经验。
- 具备出色的英语口语和书面沟通能力。
与 Turing 合作的自由职业福利
- 完全远程的工作环境。
- 有机会与领先的 LLM 公司合作参与前沿 AI 项目。
录用详情
- 所需投入：每天至少 4 小时，每周至少 20 小时，并与 PST 有 4 小时的重叠。
- 合作类型：合同工（无医疗/带薪休假）
- 合同期限：3 个月（可根据合作情况调整）
- 地点：印度、巴基斯坦、尼日利亚、肯尼亚、埃及、加纳、孟加拉国、土耳其、巴西、墨西哥
评估流程
- 技术面试，包含现场编码挑战（60 分钟）