关于此职位
该项目致力于针对领先系统评估和基准测试先进的智能体音频模型。该计划的使命是评估和优化模型在真实客户支持用例中的表现。 职责
- 创建并执行基于角色扮演的评估场景，模拟跨多个领域的真实客户服务交互，包括：
- 航班预订和旅行支持
- 金融服务
- 电信和技术支持
- 为开发用于评估对话式音频智能体的多样化且具有代表性的数据集做出贡献。
- 依据一套标准化的定性和定量指标评估模型表现。
- 确保评估反映出真实客户对清晰度、效率和自然对话流畅性的期望。
评估指标 模型表现通过对话、技术和音频特定标准的组合进行评估，包括但不限于：
- 任务完成的准确性和效率
- 对话自然度（语气、流畅性和连贯性）
- 音频理解和回复质量
- 指令遵循和上下文理解
- 基本计算机编程素养，包括：
- 理解JSON结构
- 熟悉函数和方法
- 能够对结构化数据和简单逻辑进行推理
- 处理支持类问题解决时的技术沟通清晰度
技术与设备要求
- 在模拟客户支持情境中具备较强的口头沟通能力
- 英语熟练，包括读、听、写、说各项语言技能的流利程度。
- 可使用高质量麦克风，以确保评估期间音频输入清晰可靠
- 能够自如处理结构化提示、评估评分标准和技术指南
- 设备能够运行音频录制软件并打开大型技术文档
我们提供每小时 11 至 30.65 美元的薪资范围，具体费率将在评估您的经验、专业知识和地理位置后确定。最终报价金额可能与上述薪资范围有所不同。作为承包商，您需自备安全的电脑和高速互联网；公司赞助的福利（如健康保险和带薪休假）不适用。
雇佣类型：合同制 工作场所类型：远程 资历级别：中高级