关于此职位
质量评估员 – 英语
通过评估和比较先进 AI 模型的回答，帮助塑造 AI 的未来。
- 地点：远程
- 类型：独立承包商 / 兼职
- 承诺期：最长 3 个月
- 报酬：$7-$12/小时
关于该职位
在 Anyone AI，我们为前沿 AI 模型创建高质量的训练和评估数据。
我们正在寻找英语流利的专家，要求具备出色的写作能力、批判性思维，以及使用大型语言模型（LLM）的丰富实践经验。
在该职位中，你将直接与 AI 模型交互，并排比较它们的回答，以确定哪个最能满足用户需求。你的评估和书面说明将有助于提高 AI 系统的准确性、有用性和可靠性。
你将做什么
- 在广泛的提示和主题下，与不同的 AI 模型和工具交互。
- 并排比较两个或多个 AI 生成的回答。
- 评估准确性、有用性、指令遵循、清晰度和整体回答质量。
- 遵循详细的评分指南和多步骤评估工作流程。
- 撰写清晰、有理有据的说明，以支持你的评估决定。
- 在各任务中一致地应用评估标准。
我们在寻找什么
- 英语流利，具备较强的阅读理解和写作能力。
- 使用 LLM 并批判性评估其输出的丰富实践经验。
- 较强的分析判断能力，能够权衡回答质量的多个维度。
- 出色的注重细节能力，能够仔细遵循复杂指令。
- 能够清晰且有说服力地解释评估决定。
- 能够自如地在 AI 模型、工具和多步骤工作流程之间切换。
加分项
- 具有 AI 回答评估、数据标注或质量保证方面的经验。
- 具有编辑、研究、事实核查或分析写作方面的经验。
- 熟悉评估量表和并排比较任务。