この求人について
品質評価者 – 英語
高度なAIモデルの回答を評価・比較し、AIの未来を形づくる手助けをしてください。
- 勤務地：リモート
- 雇用形態：独立請負 / パートタイム
- 契約期間：最大3か月
- 報酬：$7～$12/時間
職務について
Anyone AIでは、最先端のAIモデル向けに高品質なトレーニングデータと評価データを作成しています。
英語に流暢で、優れた文章力、批判的思考力、そして大規模言語モデル（LLM）の豊富な実務経験を持つ専門家を募集しています。
この職務では、AIモデルと直接やり取りし、その回答を並べて比較して、どちらがユーザーのニーズに最も合致しているかを判断します。あなたの評価と記述による説明は、AIシステムの正確性、有用性、信頼性の向上に役立ちます。
業務内容
- 幅広いプロンプトとトピックにわたり、さまざまなAIモデルやツールとやり取りする。
- 2つ以上のAI生成回答を並べて比較する。
- 正確性、有用性、指示への準拠、明瞭さ、回答全体の品質を評価する。
- 詳細な評価ガイドラインと多段階の評価ワークフローに従う。
- 評価判断を裏付ける、明確で筋の通った説明を書く。
- 評価基準をタスク全体に一貫して適用する。
求める人物像
- 英語に流暢で、優れた読解力と文章力を持つ。
- LLMを使用し、その出力を批判的に評価した豊富な実務経験がある。
- 優れた分析力と判断力を持ち、回答品質の複数の側面を比較検討できる。
- 細部への注意力に優れ、複雑な指示に注意深く従える。
- 評価判断を明確かつ説得力をもって説明できる。
- AIモデル、ツール、多段階ワークフローを切り替えることに抵抗がない。
歓迎する条件
- AI回答の評価、データアノテーション、品質保証における過去の経験。
- 編集、調査、ファクトチェック、分析的な文章作成の経験。
- 評価ルーブリックや並列比較タスクに関する知識。