この求人について
この時間給・リモートのコントラクター職では、歴史品質保証リード(QAL)として、歴史に焦点を当てたAIトレーニングプロジェクト全体における品質、一貫性、トレーナーのパフォーマンスを監督します。AIが生成した歴史コンテンツやトレーナー/QAの作業をレビューし、プロジェクトのガイドラインに照らして出力の品質を評価し、的確な書面フィードバックを提供し、すべての貢献者が期待される品質基準に従うことを確保します。
作業内容は、歴史的正確性、年代順の整合性、出典への認識、因果関係、文脈、地域的・文化的ニュアンス、解釈の品質、明瞭さ、書式、指示への準拠、プロジェクト固有のルーブリックへの適合性の観点から評価します。繰り返し発生する品質上の問題を特定し、トレーナーやQAに更新情報を伝え、オンボーディングを支援し、ドキュメントを維持し、一貫して作業していない貢献者の稼働促進を支援します。この役割には、優れた歴史の専門知識、高い英語コミュニケーション能力、卓越した細部への注意力、構造化されたコミュニケーション、およびリモートの専門家チーム全体で品質ワークフローを管理する能力が求められます。
この役割は、急成長中のAIデータサービス企業であり、SuperAnnotateの子会社であるSME Careersに所属します。同社は世界最大級のAI企業や基盤モデル研究所の多くにトレーニングデータを提供しています。あなたの歴史品質に関するリーダーシップは、歴史トレーニングデータが正確で、文脈化され、バランスが取れ、十分に説明され、十分に文書化され、クライアントの期待に沿ったものとなることを確保することで、世界最高水準のAIモデルの改善に直接貢献します。
選考プロセスには、AI面接、ドメイン固有のタスク、リクルーターとの面接が含まれます。
重要: この役割には現時点で直ちに開始するプロジェクトはありません。ただし、資格を満たす場合、関連する機会が生じた際に最初にご連絡する専門家の一人となります。これにより、当社の専門家ネットワークを通じて将来利用可能なプロジェクトにもアクセスできるようになります。
業務内容
- 品質モニタリング:歴史項目を抜き取り検査し、品質上の問題を特定し、DMを通じて継続的なフィードバックを提供し、繰り返し発生する問題や重大な問題をエスカレーションします。
- 歴史レビュー:AIが生成した歴史の説明、年表、比較、要約、出典に基づく回答、推論を、正確性、文脈、バランス、明瞭さの観点から評価します。
- トレーナーおよびQAとのコミュニケーション:Discordを通じて、新しい項目のガイドライン、プロジェクトの変更、ワークフローの更新、品質への期待、歴史固有のレビュー基準についてトレーナーとQAに更新情報を伝えます。
- 質問対応:特に年代順、歴史的文脈、出典の解釈、論争のある解釈、バイアス、地域的ニュアンス、ルーブリックの解釈に関して、トレーナー/QAの質問に明確かつ迅速に回答します。
- トレーナー/QAの稼働管理:非アクティブまたは作業していない貢献者にDMを送り、稼働を促し、フォローアップを追跡し、必要に応じて稼働可能性の問題を報告します。
- ドキュメント作成:スタイルガイド、トラッカー、FAQ、品質ノート、例、ハニーポット、キャリブレーションタスク、オンボーディング資料など、歴史プロジェクトのドキュメントを作成・維持します。
- オンボーディングとトレーニング:トレーナーおよびQAとのオンボーディング/トレーニングコールを設定・実施し、プロジェクトの期待事項、ワークフロー、ルーブリック、品質基準、歴史固有のレビュー要件を説明します。
- 品質の整合:すべてのトレーナーとQAが歴史レビューのガイドラインを一貫して適用し、プロジェクトの進展に伴う更新を理解することを確保します。
- リスクとバイアスのレビュー:誤解を招く、過度に断定的な、偏った、文化的に配慮を欠く、時代錯誤的な、または出典が不十分な歴史的主張を報告します。
- プロセス改善:繰り返し発生する品質上のギャップを特定し、ワークフローの改善を提案し、歴史AIトレーニングプロジェクト向けのスケーラブルなQAプロセスの構築を支援します。
求める人物像
- 歴史学、古典学、地域研究、考古学、政治史、文化史、国際関係、人文科学、または密接に関連する分野の学士号、修士号、または博士号。
- プロジェクトのガイドラインに従い、チームとコミュニケーションを取り、明確な書面フィードバックを提供するための高い英語力。
- 歴史研究、教育、執筆、編集、学術レビュー、博物館/公文書館業務、カリキュラム開発、または関連する人文科学のワークフローにおける3年以上の経験。
- 歴史的方法論、年代順の整合性、一次資料と二次資料、歴史学(ヒストリオグラフィー)、因果関係、連続性/変化、地域的文脈、証拠に基づく解釈に関する深い理解。
- 詳細なルーブリックに照らして歴史コンテンツを評価し、時代錯誤、誤った年代順、裏付けのない主張、過度な単純化、偏った枠組み、捏造された引用、誤解を招く因果説明などの問題を特定する能力。
- 古代史、中世史、近現代史、世界史、軍事史、思想史、社会史、経済史、植民地/ポストコロニアル史、地域史など、1つ以上の歴史専門分野に精通していることが望ましい。
- 研究者、ライター、レビュアー、教育者、アノテーター、QAなどのリモートチームを率いた、または支援した経験があることが強く望ましい。
- Discord、Googleスプレッドシート、Googleドキュメント、トラッカー、ダッシュボード、プロジェクト管理システムなどのツールを使用し、変化の速いリモート環境で働くことに慣れていること。
- 細部への注意力と組織力が非常に高く、スタイルガイド、FAQ、トラッカー、オンボーディング資料、キャリブレーションタスク、ドキュメントを維持する能力。
- AIトレーニング、データアノテーション、LLM評価、学術QA、ファクトチェック、またはルーブリックに基づくレビューの経験があることが大きなプラス。