この求人について
品質評価者 – 英語
高度なAIモデルからの応答を評価・比較し、AIの未来を形作るお手伝いをしてください。
- 勤務地：リモート
- 種類：独立請負業者 / パートタイム
- 期間：最大3か月
- 報酬：$7～$12/時間
職務について
Anyone AIでは、最先端のAIモデル向けに高品質なトレーニングデータと評価データを作成しています。
英語に流暢で、優れたライティングスキル、批判的思考力、そして大規模言語モデル（LLM）の豊富な実践経験を持つ専門家を求めています。
この職務では、AIモデルと直接対話し、その応答を並べて比較して、どちらがユーザーのニーズに最も適合するかを判断します。あなたの評価と文章による説明は、AIシステムの正確性、有用性、信頼性の向上に役立ちます。
業務内容
- 幅広いプロンプトやトピックにわたり、さまざまなAIモデルやツールと対話する。
- 2つ以上のAI生成応答を並べて比較する。
- 正確性、有用性、指示への準拠、明確性、および応答全体の品質を評価する。
- 詳細な評価ガイドラインと多段階の評価ワークフローに従う。
- 評価の判断を裏付ける明確で筋の通った説明を書く。
- 評価基準をタスク全体に一貫して適用する。
求める人物像
- 英語に流暢で、高い読解力とライティングスキルを持つ。
- LLMを豊富に実践使用し、その出力を批判的に評価した経験がある。
- 強い分析力と、応答品質の複数の側面を比較検討する能力を持つ。
- 細部への優れた注意力と、複雑な指示を慎重に遵守する能力を持つ。
- 評価の判断を明確かつ説得力をもって説明できる。
- AIモデル、ツール、多段階のワークフローを切り替えて作業することに抵抗がない。
歓迎する条件
- AI応答の評価、データアノテーション、品質保証の経験。
- 編集、調査、ファクトチェック、分析的なライティングの経験。
- 評価ルーブリックや並列比較タスクへの習熟。