この求人について
プロジェクト概要
当社は、高度なエージェント型音声モデルを評価するAIベンチマーク評価プロジェクトのために、独立した音声評価スペシャリストを募集しています。AIモデルがこの領域で複雑なワークフロー（具体的には、航空券予約、金融サービス、通信などの実世界のカスタマーサポートシナリオ）を処理する機会が増えるにつれ、その精度は堅牢で専門家が作成したトレーニングデータに完全に依存しています。本プロジェクトの目的は、シミュレーションされたインタラクションを通じて高品質な評価タスクを自律的に作成し、会話型AIの出力を監査し、モデルのパフォーマンスを最適化するためのクリーンで信頼性の高いデータセットを生成することです。
プロジェクトの成果物と範囲
自律的に動作し、複雑な評価フレームワークを設計し、構造化されたトレーニングデータを提供します。期待される成果物には以下が含まれます：
- ロールプレイシナリオの実行：旅行、金融、テクニカルサポートの領域にわたる現実的なカスタマーサービスインタラクションをシミュレートする、複雑なロールプレイベースの評価シナリオを作成および実行する。
- モデルパフォーマンスの監査：標準化された定性的および定量的指標に基づいてAIモデルのパフォーマンスを評価し、タスク完了の正確性、会話の自然さ、音声理解に厳密に焦点を当てる。
- 技術指標の評価：JSON構造、関数、メソッドの理解や、サポートの文脈内で構造化データについて推論する能力を含む、モデルの基本的なコンピュータプログラミングリテラシーを評価する。
- 代表的なデータセットの生成：明瞭さ、効率性、自然な会話の流れに関する実際の顧客の期待を正確に反映する、多様で高品質な音声データセットの開発に貢献する。
必要な専門知識
本プロジェクトの成果物を遂行するために、契約者は現実的な専門的シナリオを作成するための深い業界知識を備えている必要があります。中核となるスキルセットには以下が含まれます：
- 複雑なカスタマーサポート、技術的なトラブルシューティング、または会話型AI評価における実証可能な専門知識。
- 対象言語におけるネイティブまたはバイリンガルの熟練度（読み、聞き、書き、話すのすべての言語スキルにわたる流暢さを含む）と、シミュレーションされたカスタマーサポートのロールプレイを自信を持って実施するための強力な分析力および口頭コミュニケーションスキル。
- 基本的なコンピュータプログラミングリテラシー、具体的にはJSON構造、関数、メソッド、および単純なロジックへの十分な理解。
- 構造化されたプロンプト、複雑な評価ルーブリック、技術ガイドラインを扱う際の細心で詳細志向のアプローチ。
- 必要な機器：音声評価中にクリーンで信頼性の高い音声入力を確保するための高品質マイクへのアクセス。
当社は時給6ドルから65ドルの報酬範囲を提供しており、正確なレートはあなたの経験、専門知識、地理的な所在地を評価した後に決定されます。最終的なオファー額は上記の報酬範囲と異なる場合があります。契約者として、安全なコンピュータと高速インターネットを提供していただきます。健康保険や有給休暇などの会社負担の福利厚生は適用されません。
契約形態：フリーランス / 独立請負業者
勤務形態：リモート
シニアリティレベル：ミドル〜シニアレベル