この求人について
品質評価者 – 英語
高度なAIモデルの回答を評価・比較し、AIの未来を形作るお手伝いをしてください。
- 勤務地: リモート
- 雇用形態: 独立請負業者 / パートタイム
- 契約期間: 最大3か月
- 報酬: 時給$7～$12
職務について
Anyone AIでは、最先端のAIモデル向けに高品質なトレーニングデータと評価データを作成しています。
英語に流暢で、優れた文章力、批判的思考力、そして大規模言語モデル（LLM）の豊富な実務経験をお持ちの専門家を募集しています。
この職務では、AIモデルと直接対話し、その回答を並べて比較して、どちらがユーザーのニーズに最も適しているかを判断していただきます。あなたの評価と文書による説明が、AIシステムの正確性、有用性、信頼性の向上に役立ちます。
業務内容
- 幅広いプロンプトやトピックにわたり、さまざまなAIモデルやツールと対話する。
- 2つ以上のAI生成回答を並べて比較する。
- 正確性、有用性、指示への準拠、明瞭さ、回答全体の品質を評価する。
- 詳細な評価ガイドラインと多段階の評価ワークフローに従う。
- 評価判断を裏付ける、明確で論理的な説明を書く。
- 評価基準をタスク全体に一貫して適用する。
求める人物像
- 英語に流暢で、優れた読解力と文章力を持つ。
- LLMを豊富に実務で使用し、その出力を批判的に評価した経験がある。
- 優れた分析力と、回答品質の複数の側面を比較検討できる能力。
- 細部への卓越した注意力と、複雑な指示を注意深く遂行できる能力。
- 評価判断を明確かつ説得力をもって説明できる能力。
- AIモデル、ツール、多段階のワークフローを切り替えながら作業できること。
歓迎する条件
- AI回答の評価、データアノテーション、品質保証の経験。
- 編集、リサーチ、ファクトチェック、分析的な文章作成の経験。
- 評価ルーブリックや並列比較タスクへの習熟。