この求人について
品質評価担当 – 英語
高度なAIモデルからの応答を評価・比較し、AIの未来を形づくるお手伝いをしてください。
- 勤務地：リモート
- 雇用形態：独立請負 / パートタイム
- 契約期間：最大3か月
- 報酬：時給$7～$12
職務について
Anyone AIでは、最先端のAIモデル向けに高品質なトレーニングデータと評価データを作成しています。
英語に流暢で、優れた文章力、批判的思考力、そして大規模言語モデル（LLM）の豊富な実務経験をお持ちの専門家を募集しています。
この職務では、AIモデルと直接やり取りし、その応答を並べて比較して、どちらがユーザーのニーズに最も適しているかを判断していただきます。あなたの評価と記述による説明は、AIシステムの正確性、有用性、信頼性の向上に役立ちます。
業務内容
- 幅広いプロンプトやトピックにわたり、さまざまなAIモデルやツールとやり取りする。
- 2つ以上のAI生成応答を並べて比較する。
- 正確性、有用性、指示への準拠、明瞭さ、応答全体の品質を評価する。
- 詳細な評価ガイドラインと多段階の評価ワークフローに従う。
- 評価判断を裏付ける、明確で筋道立った説明を書く。
- タスク全体を通じて評価基準を一貫して適用する。
求める人材
- 英語に流暢で、高い読解力と文章力をお持ちの方。
- LLMを豊富に実務で使用し、その出力を批判的に評価した経験をお持ちの方。
- 強い分析力と判断力、および応答品質の複数の側面を比較検討できる能力。
- 細部への優れた注意力と、複雑な指示を注意深く遂行できる能力。
- 評価判断を明確かつ説得力をもって説明できる能力。
- AIモデル、ツール、多段階のワークフローを切り替えて作業することに抵抗がない方。
歓迎する条件
- AI応答の評価、データアノテーション、品質保証の経験。
- 編集、調査、ファクトチェック、分析的な文章作成の経験。
- 評価ルーブリックや並列比較タスクへの熟悉。