Relecteur d’annotations de sécurité de l’IA

À propos de Turing

Turing est une entreprise de services technologiques fondée sur l’IA, dont la mission est d’accélérer l’avancement et le déploiement de l’AGI en comblant le fossé entre des talents du monde entier, issus de 100+ pays, et les meilleures entreprises de LLM de base au monde, en les aidant à améliorer leurs performances grâce à l’évaluation de modèles, au fine-tuning, aux retours, à la factualité et à la gestion de données variées.

Aperçu du poste

Une entreprise d’IA basée aux États-Unis, à la pointe de la recherche en IA, recherche un responsable d’équipe (Team Lead) pour superviser une équipe d’analystes métier. Cette opportunité s’adresse aux professionnels qui ont de l’expérience dans la direction d’équipes et souhaitent soutenir le développement de solutions à la pointe de la technologie.

Responsabilités du poste

• Auditer les évaluations soumises par les formateurs afin de repérer les erreurs d’application des politiques, les raisonnements incomplets, les dérives de notation, les erreurs de schéma et les incohérences d’annotation.
• Appliquer de manière cohérente un cadre détaillé de politique de sécurité de l’IA à des tâches de revue à enjeux élevés.
• Identifier les erreurs individuelles et systématiques dans les annotations et les évaluations écrites produites par des humains.
• Valider l’exhaustivité des annotations, l’exactitude de la notation, la conformité aux politiques et le respect des schémas requis.
• Fournir des retours directs et constructifs aux formateurs et recommander des actions correctives lorsque des problèmes de qualité sont identifiés.
• Documenter les schémas d’erreurs récurrents et contribuer aux initiatives d’amélioration de la qualité, de calibrage et de formation des relecteurs.
• Maintenir l’exactitude et la cohérence tout en travaillant dans des conditions de délais serrés et en traitant des contenus sensibles.

Exigences du poste

• Grand sens du détail et solides compétences d’analyse et de raisonnement logique.
• Expérience avérée de l’identification d’erreurs systématiques dans des annotations, des évaluations ou des appréciations écrites produites par des humains.
• Capacité à comprendre rapidement et à appliquer de manière cohérente des directives de politique détaillées.
• Maîtrise de l’anglais de niveau natif et solides compétences de communication écrite.
• À l’aise pour fournir des retours clairs, directs et constructifs.
• Bonne compréhension du contexte culturel et des normes de communication américains.
• Capacité à travailler de manière autonome, à gérer les priorités et à maintenir la qualité sous la pression du temps.
• Disponibilité pour s’engager à raison de 40 heures par semaine ; une disponibilité immédiate est souhaitée.

Qualifications souhaitées

• Expérience de la revue d’annotations d’IA, de l’assurance qualité en Trust & Safety, de l’ingénierie de test, de la modération de contenus ou de la vérification des faits éditoriale.
• Expérience préalable de la validation de schémas, des revues de conformité aux politiques, des contrôles d’exhaustivité des annotations ou de l’audit qualité.
• Expérience du travail avec des contenus sensibles ou à enjeux élevés.

Remarque importante : ce projet comprend des contenus sensibles portant sur des sujets tels que l’automutilation, la violence et les abus. Des décharges appropriées, des ressources de soutien et des mesures de bien-être seront appliquées.

Avantages

• Possibilité de travailler sur des projets d’IA de pointe.
• Rémunération compétitive.
• Horaires de travail flexibles et environnement de travail à distance.

Processus de candidature

• Les candidats présélectionnés seront contactés.