高级 AI 训练师

职位名称：高级 AI 训练师

职位类型：合同工，远程

工作地点：北美和德国。

micro1 正在聘请高级 AI 训练师，参与一个由客户驱动的项目，通过专家级的模型训练和评估来提升 AI 系统质量。在这一职位中，您将运用自己的通才专长以及使用 AI 产品的实践经验，帮助训练新一代 AI 系统。您的工作将通过高质量的真实世界输入，塑造模型学习、推理和表现的方式。

主要职责：

• 在标准化、可重复的条件下评估 AI 聊天和搜索工具的表现。
• 运用详细的评分指南，准确地评估、排序并标注模型回答，提供有助于提升模型性能的结构化反馈。
• 撰写、完善并压力测试用于探查模型能力的提示词，确保覆盖多样的场景、边界情况和用户意图。
• 核实各项评估之间的一致性和准确性，纠正评分与底层评分标准或指南之间的差异。
• 使用 AI 训练工具和平台记录发现，并按照项目标准和里程碑提交评估数据集。
• 与项目训练师和贡献者协作，解决含糊之处、完善指南，并确保整个团队的评估一致性。
• 参与持续的质量评审，吸收反馈，以维持严格的训练和标注标准。

必备技能与资质：

• 在审阅和评估 AI 生成的内容时，对细节和准确性极为关注。
• 具备出色的书面和口头沟通能力，以便有效协作、汇报，并及时更新进展和挑战。
• 具有经证实的时间管理和自我组织能力，能够独立参与远程项目。
• 具备分析和解决问题的思维，并以积极主动的方式应对评估挑战。

优先资质：

• 在 AI 模型训练、RLHF、数据标注或类似的以数据为中心的评估项目方面有经证实的经验。
• 熟悉 AI 产品和工具，包括提示词工程，并了解模型的行为和局限性。
• 具有编写评估评分标准、对模型输出评分，或审阅 AI 回答的准确性、有用性和安全性的经验。
• 具有 AI 训练、机器学习数据准备或以 LLM 为重点的项目背景（强烈优先）。