この求人について
この時間給・リモートのコントラクター職では、コンピュータサイエンス＆IT品質保証リード（QAL）として、コンピュータサイエンス、IT、ソフトウェア、システム、技術系AIトレーニングプロジェクト全体にわたる品質、一貫性、トレーナーのパフォーマンスを監督します。AIが生成したコンピュータサイエンス/ITコンテンツやトレーナー/QAの作業をレビューし、プロジェクトガイドラインに照らして出力品質を評価し、的確な文章によるフィードバックを提供し、すべての貢献者が期待される品質基準に従うことを確保します。
作業内容について、技術的な正確性、概念の正しさ、コードとシステムの推論、用語の品質、トラブルシューティングの論理、セキュリティ意識、明瞭さ、フォーマット、指示への従順性、プロジェクト固有のルーブリックへの準拠を評価します。繰り返し発生する品質問題を特定し、トレーナーやQAに更新を伝え、オンボーディングを支援し、ドキュメントを維持し、継続的に作業していない貢献者の稼働を促します。この役割には、強力なコンピュータサイエンス/ITの専門知識、強力な英語コミュニケーション能力、卓越した細部への注意力、構造化されたコミュニケーション、およびリモートの技術チーム全体で品質ワークフローを管理する能力が必要です。
この役割はSME Careersに所属します。SME Careersは急成長中のAIデータサービス企業であり、SuperAnnotateの子会社で、世界最大級のAI企業や基盤モデル研究所の多くにトレーニングデータを提供しています。あなたのコンピュータサイエンスとITの品質リーダーシップは、技術トレーニングデータが正確で、論理的に健全で、明確に説明され、十分に文書化され、クライアントの期待に沿っていることを確保することで、世界最高水準のAIモデルの改善に直接貢献します。
業務内容
- 品質モニタリング：コンピュータサイエンスおよびITの項目を抜き取り検査し、品質問題を特定し、DMを通じて継続的なフィードバックを提供し、繰り返し発生する問題や重大な問題をエスカレーションします。
- 技術レビュー：AIが生成した説明、コードスニペット、トラブルシューティング手順、システム設計コンテンツ、データベースに関するガイダンス、ネットワーキングの回答、セキュリティ関連コンテンツ、技術的推論を、正確性と明瞭さの観点から評価します。
- トレーナーおよびQAとのコミュニケーション：Discord上でトレーナーとQAに対し、新しい項目ガイドライン、プロジェクトの変更、ワークフローの更新、品質への期待、技術レビュー基準について更新情報を伝えます。
- 質問対応：トレーナー/QAからの質問、特にプログラミングの概念、デバッグ、ITワークフロー、システムの動作、ネットワーキング、データベース、セキュリティ、ルーブリックの解釈に関する質問に、明確かつ迅速に回答します。
- トレーナー/QAの稼働管理：非アクティブまたは作業していない貢献者にDMを送り、稼働を促し、フォローアップを追跡し、必要に応じて可用性の問題を報告します。
- ドキュメント：スタイルガイド、トラッカー、FAQ、品質ノート、例、ハニーポット、キャリブレーションタスク、オンボーディング資料など、コンピュータサイエンス/ITプロジェクトのドキュメントを作成および維持します。
- オンボーディングとトレーニング：トレーナーおよびQAとのオンボーディング/トレーニング通話を設定・実施し、プロジェクトの期待事項、ワークフロー、ルーブリック、品質基準、技術レビュー要件を説明します。
- 品質の整合：すべてのトレーナーとQAがコンピュータサイエンス/ITガイドラインを一貫して適用し、プロジェクトの進展に伴う更新を理解することを確保します。
- リスクレビュー：誤解を招く、安全でない、実行不可能な、ハルシネーションによる、時代遅れの、または技術的に危険な推奨事項を報告します。
- プロセス改善：繰り返し発生する品質ギャップを特定し、ワークフローの改善を提案し、コンピュータサイエンスおよびITのAIトレーニングプロジェクト向けにスケーラブルなQAプロセスの構築を支援します。
- パンジャブ語のネイティブレベルの流暢さ
求める人物像
- コンピュータサイエンス、情報技術、ソフトウェアエンジニアリング、情報システム、サイバーセキュリティ、データサイエンス、または密接に関連する技術分野の学士号、修士号、または同等の実務経験。
- プロジェクトガイドラインを遵守し、チームとコミュニケーションを取り、明確な文章によるフィードバックを提供するための、強力な英語力。
- 3年以上の、ソフトウェア開発、ITサポート、システム管理、ネットワーキング、サイバーセキュリティ、データワークフロー、技術教育、テクニカルライティング、QA、または関連する技術レビューワークフローにおける経験。
- プログラミングの概念、アルゴリズム、データ構造、オペレーティングシステム、データベース、ネットワーキング、クラウドの基礎、セキュリティ原則、API、デバッグ、トラブルシューティングを含む、コンピュータサイエンスとITの基礎に対する強い理解。
- 詳細なルーブリックに照らして技術コンテンツを評価し、誤ったコードロジック、欠陥のあるトラブルシューティング手順、ハルシネーションによるコマンド/API、セキュリティリスク、誤った用語、根拠のない前提、不完全な説明などの問題を特定する能力。
- Git/GitHub、IDE、ターミナル、Linux/Windows/macOS、SQL、クラウドプラットフォーム、REST API、Docker、ネットワーキングツール、チケット/サポートシステムなどの一般的なツールや環境に精通していることが望ましい。
- エンジニア、ITスペシャリスト、レビュアー、アノテーター、トレーナー、教育者、QAからなるリモートチームを率いた、または支援した経験が強く望ましい。
- Discord、Google Sheets、Google Docs、トラッカー、ダッシュボード、GitHub、プロジェクト管理システムなどのツールを使用し、動きの速いリモート環境で働くことに馴染んでいること。
- 細部への注意力と組織力が非常に高く、スタイルガイド、FAQ、トラッカー、オンボーディング資料、ハニーポット、キャリブレーションタスク、ドキュメントを維持する能力。
- AIトレーニング、データアノテーション、LLM評価、技術QA、コードレビュー、IT知識レビュー、またはルーブリックに基づくレビューの経験があることが強み。