关于此职位
关于 Turing:
Turing 是全球增长最快的 AI 公司之一,致力于加速强大 AI 系统的发展与部署。
Turing 通过两种方式帮助客户:与全球领先的 AI 实验室合作,提升前沿模型在思考、推理、编码、智能体行为、多模态、多语言能力、STEM 和前沿知识方面的能力;并利用这些成果构建真实世界的 AI 系统,帮助企业解决关键任务级的重要事项。
职位概述:
我们正在寻找一位资深的电视节目与电影领域专家,评估并改进大语言模型(LLM)。您将设计具有挑战性的提示词,评估事实准确性和推理能力,并识别电影、电视、流媒体、演员、导演、类型、奖项、系列作品和娱乐史等方面的知识空白。
主要职责
- 创建涵盖电影、电视、流媒体、演员、导演、类型、奖项、系列作品和娱乐史的高级提示词。
- 评估 AI 生成的回复的事实准确性、推理质量、完整性和细微差别。
- 识别幻觉、逻辑不一致、过时信息和边缘案例。
- 开发基准数据集和对抗性测试用例。
- 提供有证据支撑并附有可靠参考资料的反馈。
- 与 AI 研究人员协作,提升模型性能。
- 保持高标准的标注质量和文档。
日常任务
- 编写不同难度的领域特定提示词。
- 比较多个 AI 回复并对其排序。
- 使用权威参考资料解释某个回复为何正确或错误。
- 识别含糊不清的问题并提出改进后的提示词。
最低资质
- 任意领域的硕士或更高学位;电影研究、电视研究、媒体研究、新闻学、传播学、英语/文学、影视研究或其他娱乐相关学科的学位优先。
- 具备丰富的电影和电视知识,包括熟悉电影、电视剧、演员、导演、创作者、类型、系列作品、奖项、流媒体平台以及整个娱乐行业的重要发展。
- 3+ 年相关专业经验,最好来自娱乐新闻、影视评论、娱乐媒体、内容创作、研究、分析、报道或相关领域。
- 出色的英语书面表达、研究和分析能力。
- 注重细节,能够准确评估与电影、电视和娱乐相关的信息。
优先资质
- 有 LLM、生成式 AI、提示词工程或 AI 评估方面的经验。
- 有已发表的研究、行业认可或教学经验者优先。
- 能够独立工作,并提供客观、有证据支持的评审。
录用详情:
- 所需投入:每周 40 小时,与 PST 至少有 4 小时重叠
- 雇佣类型:合同工任务(无医疗/带薪休假)
- 合同期限:8 周。
- 地点:仅限美国(加利福尼亚州、康涅狄格州、马萨诸塞州、新泽西州、佛蒙特州除外)
申请流程
- 完成发送给您的测评。
- 我们的团队将评估您提交的内容。
- 入选的候选人将被联系,告知后续步骤。