この求人について
Turingについて
Turingは、世界で最も急成長しているAI企業の1つであり、強力なAIシステムの進歩と展開を加速させています。Turingは、高品質な人間によるフィードバック、評価、トレーニングデータを通じて、大手AIラボが大規模言語モデル(LLM)の推論、問題解決、意思決定の能力を向上させる支援をしています。
役割の概要
次世代AIモデルのトレーニングと評価を支援する、ボードゲーム推論エキスパートを募集しています。この役割では、ボードゲーム、ゲームメカニクス、戦略的推論、確率、複雑なルールシステムに関する専門知識を活用して、AIの性能を向上させる高品質なデータセットを作成、レビュー、評価していただきます。
ゲームロジック、意思決定、戦略的計画、ルール解釈、シナリオ分析を伴う難易度の高いタスクに取り組み、最先端のAIシステムがより強力な推論能力を身につけられるよう支援していただきます。
日々の業務内容は?
- AIシステムを評価するために設計された、ゲームに基づく推論タスクを作成・レビューする。
- ボードゲームのシナリオ、戦略的な意思決定ツリー、ルールベースのシステムを分析する。
- AIが生成した回答を、正確性、一貫性、推論の質の観点から評価する。
- ボードゲームや戦略に重点を置いたタスク向けに、プロンプト、ルーブリック、評価ガイドラインを作成する。
- AIの出力における論理エラー、ルール違反、誤った推論を特定する。
- AI評価プロジェクトにおけるベンチマーク作成と品質保証プロセスに貢献する。
- プロジェクトチームと協力して、データセットの品質と評価手法を改善する。
要件
必須資格
- コンピュータサイエンス、数学、認知科学、ゲームデザイン、哲学、経済学、または関連する分析分野の学士号。
- ボードゲームのデザイン、プレイテスト、テーブルトップゲームのコミュニティ、または戦略に重点を置いた関連環境における、プロまたはセミプロとしての経験が2年以上。
- 論理、確率的推論、ゲームメカニクス、複雑なルールシステムへの深い理解。
- ゲーム理論、行動経済学、意思決定科学、または形式論理の素養。
- 現代のボードゲーム、トレーディングカードゲーム(TCG)、テーブルトークRPG、戦略ゲーム、または競技性のあるゲームシステムへの精通。
- 優れた分析力と問題解決能力。
- 優れた文章によるコミュニケーション能力。
歓迎する資格
- データアノテーション、AIトレーニング、プロンプトエンジニアリング、QA、ゲームデザイン、パズルデザイン、またはルールベースシステムの分析の経験。
- 評価ルーブリック、ベンチマークデータセット、または品質保証フレームワークの作成経験。
- Python、SQL、またはデータ分析ツールの使用経験。
- RLHF、モデル評価、合成データ生成、またはLLMベンチマークプロジェクトに携わった経験。
- 最近リリースされた戦略ゲームやテーブルトップゲームへの精通と、新しいルールシステムを素早く習得できる能力。
Turingでフリーランスとして働く特典
- 完全リモート環境で働けます。
- 大手LLM企業と、最先端のAIプロジェクトに取り組む機会があります。
オファー内容
- 必要な稼働時間:1日あたり最低4時間、週あたり最低20時間で、PSTとの重複時間は4時間。
- 契約形態 :業務委託契約(医療給付・有給休暇なし)
- 契約期間 :2か月;[開始予定日は来週]
選考プロセス
- 持ち帰り型アセスメント(Take home Assessment)