关于此职位
质量评估员 – 英语
通过评估和比较先进 AI 模型的回复,帮助塑造 AI 的未来。
- 地点:远程
- 类型:独立承包商 / 兼职
- 承诺时长:最长 3 个月
- 报酬:$7-$12/小时
关于该职位
在 Anyone AI,我们为前沿 AI 模型创建高质量的训练和评估数据。
我们正在寻找英语流利、具备出色写作能力、批判性思维以及丰富大语言模型(LLM)实际使用经验的专家。
在该职位中,你将直接与 AI 模型交互,并排比较它们的回复,判断哪个最能满足用户需求。你的评估和书面说明将帮助提升 AI 系统的准确性、有用性和可靠性。
你将做什么
- 围绕广泛的提示和主题,与不同的 AI 模型和工具交互。
- 并排比较两个或多个 AI 生成的回复。
- 评估准确性、有用性、指令遵循、清晰度以及整体回复质量。
- 遵循详细的评分指南和多步骤评估流程。
- 撰写清晰、有理有据的说明,支持你的评估决定。
- 在各项任务中一致地应用评估标准。
我们正在寻找
- 英语流利,具备较强的阅读理解能力和写作能力。
- 拥有丰富的大语言模型实际使用经验,并能批判性地评估其输出。
- 具备较强的分析判断能力,能够权衡回复质量的多个维度。
- 非常注重细节,能够仔细遵循复杂指令。
- 能够清晰且有说服力地解释评估决定。
- 能够自如地在 AI 模型、工具和多步骤流程之间切换。
加分项
- 有 AI 回复评估、数据标注或质量保证方面的经验。
- 有编辑、研究、事实核查或分析写作方面的经验。
- 熟悉评估量规和并排比较任务。