关于此职位
职位名称:情报分析师
职位类型:合同工
工作地点:远程
micro1 正在聘请情报分析师,参与一个面向客户的项目,该项目专注于评估和提升人工智能能力。在这一职位中,您将运用自己的专业知识,帮助训练新一代 AI 系统。您的工作将通过高质量的真实世界输入,塑造模型学习、推理和表现的方式。无需具备 AI 相关经验——您的专业领域知识才是关键。
工作范围
- 开发分析案例,并将其映射到多个评估领域中已定义的分类体系,确保全面覆盖相关的情报场景。
- 编写复杂的测试用例,用于评估模型在来源处理、分析严谨性以及细致的不确定性表达方面的表现。
- 依据推理、来源使用、对局限性的认识以及实际效用等标准,评估并给 AI 生成的回答评分。
- 识别并标记模型对正当分析性探讨过度拒绝的情形,并提供清晰的文档和反馈。
- 记录边界情况和分析分歧,支持评估方法的持续改进。
- 与项目负责人协作,完善来源评估和置信度级别划分的流程。
- 贡献见解,帮助校准分析标准,并提升 AI 系统基准测试的整体质量。
优先资质
- 具有经证实的全源分析经验,或在某一特定分析学科具有深厚专长,最好具有民用情报界背景。
- 精通来源评估、置信度评估以及既定的分析标准。
- 具有教学、指导或主持分析评审的经验,并在培养分析严谨性方面有业绩记录。
- 具备出色的书面和口头沟通能力,注重清晰与精确。
- 能够识别并阐明模型细微的局限性和过度拒绝的情形。
- 熟悉结构化分析技术和情报工作技艺标准。
- 曾参与 AI 评估或模型评测项目者优先。
了解更多关于我们的政府与国防工作
在 micro1,我们与政府和国防领域的专家合作,评估先进 AI 模型在真实任务中的表现。
我们的 MissionReport 基准测试评估 AI 生成的军事和政府报告,凸显专家判断、准确性和作战理解的重要性。
了解更多:https://www.micro1.ai/benchmark/mission-report