关于此职位
关于 Turing
Turing 是全球增长最快的 AI 公司之一,致力于加速强大 AI 系统的发展与部署。Turing 通过高质量的人类反馈、评估和训练数据,帮助领先的 AI 实验室提升大语言模型(LLM)的推理、问题解决和决策能力。
职位概述
我们正在寻找桌游推理专家,协助训练和评估下一代 AI 模型。在此职位中,您将运用您在桌游、游戏机制、策略推理、概率和复杂规则系统方面的专业知识,创建、审阅和评估能够提升 AI 性能的高质量数据集。
您将处理涉及游戏逻辑、决策、战略规划、规则解释和情景分析的挑战性任务,帮助前沿 AI 系统发展更强的推理能力。
日常工作是什么样的?
- 创建并审阅旨在评估 AI 系统的、基于游戏的推理任务。
- 分析桌游场景、策略决策树和基于规则的系统。
- 评估 AI 生成的回复的正确性、一致性和推理质量。
- 为桌游及策略类任务开发提示词、评分标准和评估指南。
- 识别 AI 输出中的逻辑错误、违反规则之处和有缺陷的推理。
- 为 AI 评估项目的基准创建和质量保证流程做出贡献。
- 与项目团队协作,提升数据集质量和评估方法。
要求
必备资质
- 计算机科学、数学、认知科学、游戏设计、哲学、经济学或相关分析领域的学士学位。
- 在桌游设计、试玩测试、桌面游戏社区或相关的策略类环境中拥有 2+ 年专业或半专业经验。
- 对逻辑、概率推理、游戏机制和复杂规则系统有深入理解。
- 具有博弈论、行为经济学、决策科学或形式逻辑背景。
- 熟悉现代桌游、集换式卡牌游戏(TCG)、桌面角色扮演游戏、策略游戏或竞技游戏系统。
- 出色的分析和问题解决能力。
- 出色的书面沟通能力。
优先资质
- 具有数据标注、AI 训练、提示词工程、QA、游戏设计、谜题设计或基于规则的系统分析方面的先前经验。
- 有创建评估评分标准、基准数据集或质量保证框架的经验。
- 有 Python、SQL 或数据分析工具的使用经验。
- 有 RLHF、模型评估、合成数据生成或 LLM 基准测试项目的工作经验。
- 熟悉近期发布的策略类或桌面游戏,并能快速学习新的规则系统。
与 Turing 合作的自由职业福利
- 完全远程的工作环境。
- 有机会与领先的 LLM 公司合作参与前沿 AI 项目。
录用详情
- 所需投入:每天至少 4 小时,每周至少 20 小时,并与 PST 有 4 小时的重叠。
- 合作类型:合同工任务(无医疗/带薪休假)
- 合同期限:2 个月;[预计开始日期为下周]
评估流程
- 居家完成的测评