この求人について
高度なエージェント型音声モデルを主要システムと比較して評価・ベンチマークするためのプロジェクトです。本プログラムの使命は、実際のカスタマーサポートのユースケースにおけるモデルのパフォーマンスを評価・最適化することです。 職務内容
- 複数の領域にわたる現実的なカスタマーサービス対応をシミュレートする、ロールプレイベースの評価シナリオを作成・実行する。領域には以下を含む：
- 航空券予約および旅行サポート
- 金融サービス
- 電気通信およびテクニカルサポート
- 会話型音声エージェントの評価に使用される、多様で代表的なデータセットの開発に貢献する。
- 標準化された定性的・定量的指標のセットに基づいてモデルのパフォーマンスを評価する。
- 評価が、明確さ、効率性、自然な会話の流れに関する実際の顧客の期待を反映するようにする。
評価指標 モデルのパフォーマンスは、会話・技術・音声に特化した基準を組み合わせて評価され、以下を含むがこれらに限定されない：
- タスク完了の正確性と効率性
- 会話の自然さ（トーン、流れ、一貫性）
- 音声の理解度と応答品質
- 指示への準拠と文脈の理解
- 基本的なコンピュータプログラミングのリテラシー。以下を含む：
- JSON構造の理解
- 関数とメソッドへの習熟
- 構造化データと単純な論理について推論する能力
- サポート形式の問題解決における技術的なコミュニケーションの明確さ
技術・機器要件
- シミュレートされたカスタマーサポートの文脈における優れた口頭コミュニケーション能力
- 英語能力。読む・聞く・書く・話すのすべての言語スキルにわたる流暢さを含む。
- 評価中にクリーンで信頼性の高い音声入力を確保するための高品質マイクへのアクセス
- 構造化されたプロンプト、評価ルーブリック、技術ガイドラインを扱うことに抵抗がないこと
- 音声録音ソフトウェアを実行し、大規模な技術文書を開くことができるデバイス
時間給$11～$30.65の報酬レンジを提示します。正確なレートは、あなたの経験、専門性、地理的な所在地を評価した後に決定されます。最終的なオファー額は上記の報酬レンジと異なる場合があります。契約者として、安全なコンピュータと高速インターネットを用意していただきます。健康保険や有給休暇などの企業スポンサーによる福利厚生は適用されません。
雇用形態：契約 勤務形態：リモート シニアリティレベル：ミドル～シニアレベル