この求人について
品質評価者 – 英語
高度なAIモデルの回答を評価・比較し、AIの未来づくりに貢献してください。
- 勤務地: リモート
- 雇用形態: 業務委託 / パートタイム
- 契約期間: 最大3か月
- 報酬: 時給$7~$12
業務内容
Anyone AIでは、最先端AIモデル向けの高品質なトレーニングデータおよび評価データを作成しています。
英語に堪能で、優れたライティングスキル、批判的思考力、そして大規模言語モデル(LLM)を実際に使い込んだ豊富な経験をお持ちの専門家を募集しています。
この職務では、AIモデルと直接やり取りし、その回答を並べて比較し、どちらがユーザーのニーズに最も適しているかを判断していただきます。あなたの評価と記述による説明は、AIシステムの正確性、有用性、信頼性の向上に役立ちます。
主な業務
- 幅広いプロンプトやトピックについて、さまざまなAIモデルやツールとやり取りする。
- 2つ以上のAI生成回答を並べて比較する。
- 正確性、有用性、指示への準拠、明瞭さ、回答全体の品質を評価する。
- 詳細な評価ガイドラインと多段階の評価ワークフローに従う。
- 評価判断を裏付ける、明確で筋道立った説明を書く。
- 評価基準をタスク全体で一貫して適用する。
求める要件
- 英語の流暢さ、高い読解力とライティングスキル。
- LLMを実際に使い込み、その出力を批判的に評価した豊富な経験。
- 強い分析的判断力と、回答品質の複数の側面を比較検討する能力。
- 細部への優れた注意力と、複雑な指示を注意深く守る能力。
- 評価判断を明確かつ説得力をもって説明する能力。
- AIモデル、ツール、多段階ワークフローを切り替えながら作業することに抵抗がないこと。
歓迎する条件
- AI回答の評価、データアノテーション、品質保証の経験。
- 編集、リサーチ、ファクトチェック、分析ライティングの経験。
- 評価ルーブリックや並列比較タスクへの習熟。