この求人について
プロジェクト概要
当社は、高度なエージェント型オーディオモデルを評価するAIベンチマーク評価プロジェクトのために、独立したオーディオ評価スペシャリストを募集しています。AIモデルがこの領域で複雑なワークフロー—具体的には航空券予約、金融サービス、通信などの実際のカスタマーサポートシナリオ—を扱う機会が増えるにつれ、その精度は堅牢で専門家が作成したトレーニングデータに完全に依存しています。本プロジェクトの目的は、シミュレーションによる対話を通じて高品質な評価タスクを自律的に作成し、会話型AIの出力を監査し、モデルの性能を最適化するためのクリーンで信頼性の高いデータセットを生成することです。
プロジェクトの成果物と範囲
自律的に行動し、複雑な評価フレームワークを設計し、構造化されたトレーニングデータを提供していただきます。期待される成果物は以下のとおりです：
- ロールプレイシナリオの実行：旅行、金融、テクニカルサポートの領域にわたる現実的なカスタマーサービス対話をシミュレートする、複雑なロールプレイベースの評価シナリオを作成し実行する。
- モデル性能の監査：標準化された定性的・定量的指標に基づいてAIモデルの性能を評価し、タスク完了の正確性、会話の自然さ、オーディオ理解に厳密に焦点を当てる。
- 技術的指標の評価：JSON構造、関数、メソッドの理解や、サポートの文脈内で構造化データについて推論する能力を含む、モデルの基本的なコンピュータプログラミングリテラシーを評価する。
- 代表的なデータセットの生成：明確さ、効率性、自然な会話の流れに対する実際の顧客の期待を正確に反映する、多様で高品質なオーディオデータセットの開発に貢献する。
必要な専門性
本プロジェクトの成果物を遂行するために、契約者は現実的なプロフェッショナルシナリオを作成するための深い業界知識を備えている必要があります。中核となるスキルセットは以下のとおりです：
- 複雑なカスタマーサポート、技術的なトラブルシューティング、または会話型AI評価における実証可能な専門知識。
- 対象言語におけるネイティブまたはバイリンガルレベルの習熟度（読み、聞き、書き、話すのすべての言語スキルにわたる流暢さを含む）に加え、シミュレートされたカスタマーサポートのロールプレイを自信をもって実施するための強い分析力と口頭コミュニケーション能力。
- 基本的なコンピュータプログラミングリテラシー、具体的にはJSON構造、関数、メソッド、および簡単な論理を無理なく理解できること。
- 構造化されたプロンプト、複雑な評価ルーブリック、技術ガイドラインを扱う際の細心で詳細重視の姿勢。
- 必要な機器：音声評価中にクリーンで信頼性の高いオーディオ入力を確保するための高品質マイクへのアクセス。
時間あたり6ドルから65ドルの報酬範囲を提示しており、正確なレートはあなたの経験、専門性、地理的な所在地を評価した後に決定されます。最終的なオファー額は上記の報酬範囲と異なる場合があります。契約者として、安全なコンピュータと高速インターネットをご自身で用意していただきます。健康保険や有給休暇などの会社提供の福利厚生は適用されません。
契約形態：フリーランス / 独立請負業者
勤務形態：リモート