关于此职位
项目概述
我们正在招募独立的信息专家,为AI基准评测项目提供专业支持。随着AI模型越来越多地生成专业级的数据管理策略、信息检索系统和内容架构交付成果,其准确性完全依赖于由专家精心构建的可靠训练数据。本项目旨在自主生成高质量的评测任务、有力的提示词以及清晰、结构良好的评分标准,从而为模型训练产出干净、可靠的数据。
项目交付成果与范围
自主开展工作,设计复杂的评测框架并提供结构化的训练数据。预期交付成果包括:
- 任务与提示词创建:生成真实、高质量的提示词,促使AI模型产出针对信息科学、数据管理和知识组织的复杂、专业级交付成果。
- 评分标准制定:撰写清晰、结构良好的评测评分标准,其标准高度具体、无歧义且易于评分。
- 基准评测数据生成:产出干净、可靠的训练数据,直接助力对处理复杂信息架构和检索任务的AI模型进行评测与优化。
- 质量保证与事实核查:确保所有生成的任务和评分标准符合严格的真实世界数据治理标准、研究方法论和信息管理最佳实践。
所需专业能力
为成功完成本项目的交付成果,承包方必须具备深厚的行业知识,以构建真实的专业场景。
核心技能包括:
- 在信息科学、图书馆学、数据治理或知识管理领域具有可证明的专业能力,深入理解行业标准、元数据模式和搜索方法论。
- 具备较强的写作和提示词生成能力,能够为AI评测设计高度真实、复杂的信息检索任务场景。
- 精通评分标准制定,尤其是能够创建客观、无歧义的评分标准,不留下任何主观解释的空间。
- 对数据架构、搜索机制和知识库进行事实核查时采取一丝不苟、注重细节的方法,从而为系统基准评测生成可靠数据。
我们提供每小时10至30美元的薪酬范围,具体费率将在评估您的经验、专业能力和地理位置后确定。最终报价金额可能与上述薪酬范围有所不同。作为承包方,您需自备安全的电脑和高速互联网;公司赞助的福利(如健康保险和带薪休假)不适用。
合作类型:自由职业 / 独立承包方
工作地点类型:远程