关于此职位
质量评估员 – 英语
通过评估和比较先进 AI 模型的回答，帮助塑造 AI 的未来。
- 地点：远程
- 类型：独立承包商 / 兼职
- 承诺期：最多 3 个月
- 报酬：7-12 美元/小时
关于该职位
在 Anyone AI，我们为前沿 AI 模型创建高质量的训练和评估数据。
我们正在寻找英语流利、具备出色写作能力、批判性思维以及丰富大型语言模型（LLM）实操经验的专家。
在该职位中，你将直接与 AI 模型交互，并排比较它们的回答，以确定哪个最能满足用户需求。你的评估和书面说明将帮助提升 AI 系统的准确性、有用性和可靠性。
你将做什么
- 在各种提示和主题下与不同的 AI 模型和工具交互。
- 并排比较两个或多个 AI 生成的回答。
- 评估准确性、有用性、指令遵循、清晰度和整体回答质量。
- 遵循详细的评分指南和多步骤评估流程。
- 撰写清晰、有理有据的说明来支持你的评估决定。
- 在各任务中一致地应用评估标准。
我们正在寻找
- 英语流利，具备较强的阅读理解和写作能力。
- 拥有丰富的 LLM 实操经验，并能批判性地评估其输出。
- 具备较强的分析判断能力，能够权衡回答质量的多个维度。
- 注重细节，能够仔细遵循复杂指令。
- 能够清晰且有说服力地解释评估决定。
- 能够自如地在 AI 模型、工具和多步骤流程之间切换。
加分项
- 具有 AI 回答评估、数据标注或质量保证方面的经验。
- 具有编辑、研究、事实核查或分析写作方面的经验。
- 熟悉评估量规和并排比较任务。