Responsable de l'assurance qualité en astronomie (QAL)

Dans ce rôle de sous-traitant horaire et à distance, vous travaillerez en tant que responsable de l'assurance qualité (QAL) en astronomie/astrophysique pour superviser la qualité, la cohérence et les performances des entraîneurs sur des projets d'entraînement de l'IA en astronomie et astrophysique. Vous examinerez le contenu astronomique/astrophysique généré par l'IA ainsi que le travail des entraîneurs/QA, évaluerez la qualité des résultats par rapport aux lignes directrices du projet, fournirez des retours écrits précis et veillerez à ce que tous les contributeurs respectent les normes de qualité attendues.

Vous évaluerez le travail sur le plan de l'exactitude scientifique, du raisonnement physique, de l'exactitude mathématique, de la qualité terminologique, de la gestion des unités, du contexte observationnel, de la clarté, du formatage, du respect des instructions et de la conformité aux grilles d'évaluation propres au projet. Vous repérerez les problèmes de qualité récurrents, communiquerez les mises à jour aux entraîneurs et aux QA, soutiendrez l'intégration, tiendrez la documentation à jour et aiderez à activer les contributeurs qui ne travaillent pas régulièrement. Ce rôle exige une solide expertise en astronomie/astrophysique, de solides compétences de communication en anglais, un excellent souci du détail, une communication structurée et la capacité de gérer des flux de travail qualité au sein d'équipes d'experts à distance.

Ce rôle s'inscrit dans le cadre de SME Careers, une entreprise de services de données pour l'IA en forte croissance et filiale de SuperAnnotate, qui fournit des données d'entraînement à nombre des plus grandes entreprises d'IA et laboratoires de modèles de fondation au monde. Votre leadership qualité en astronomie/astrophysique contribuera directement à améliorer les meilleurs modèles d'IA au monde en veillant à ce que les données d'entraînement en astronomie et astrophysique soient exactes, physiquement solides, clairement expliquées, bien documentées et alignées sur les attentes des clients.

Le processus de sélection comprend un entretien mené par l'IA, une tâche propre au domaine et un entretien avec un recruteur.

Important : Il n'y a pas de projet immédiat pour ce rôle ; toutefois, si vous êtes qualifié(e), vous ferez partie des premiers experts que nous contacterons lorsque des opportunités pertinentes se présenteront. Cela vous donnera également accès à de futurs projets disponibles via notre réseau d'experts.

Ce que vous ferez

• Suivi de la qualité : effectuer des contrôles ponctuels des éléments d'astronomie/astrophysique, identifier les problèmes de qualité, fournir des retours continus par messages privés et faire remonter les problèmes récurrents ou critiques.
• Révision scientifique : évaluer les explications, calculs, diagrammes, interprétations observationnelles, comparaisons et raisonnements étape par étape en astronomie/astrophysique générés par l'IA, pour en vérifier l'exactitude et la clarté.
• Communication avec les entraîneurs et les QA : informer les entraîneurs et les QA sur Discord des nouvelles lignes directrices relatives aux éléments, des changements de projet, des mises à jour des flux de travail, des attentes en matière de qualité et des normes de révision propres à l'astronomie/astrophysique.
• Gestion des questions : répondre clairement et rapidement aux questions des entraîneurs/QA, notamment sur les hypothèses physiques, les unités, la terminologie astronomique, les méthodes observationnelles, les formules et l'interprétation des grilles d'évaluation.
• Gestion de l'activation des entraîneurs/QA : envoyer des messages privés aux contributeurs inactifs ou qui ne travaillent pas, encourager l'activation, suivre les relances et signaler les problèmes de disponibilité lorsque nécessaire.
• Documentation : créer et tenir à jour la documentation du projet d'astronomie/astrophysique, notamment les guides de style, les tableaux de suivi, les FAQ, les notes de qualité, les exemples, les honeypots, les tâches de calibration et les supports d'intégration.
• Intégration et entraînement : planifier et animer des appels d'intégration/d'entraînement avec les entraîneurs et les QA pour expliquer les attentes du projet, les flux de travail, les grilles d'évaluation, les normes de qualité et les exigences de révision propres à l'astronomie/astrophysique.
• Alignement qualité : veiller à ce que tous les entraîneurs et QA appliquent de manière cohérente les lignes directrices de révision en astronomie/astrophysique et comprennent les mises à jour au fur et à mesure de l'évolution des projets.
• Revue des risques : signaler les affirmations astronomiques/astrophysiques trompeuses, trop confiantes, physiquement impossibles, numériquement incorrectes ou mal sourcées.
• Amélioration des processus : identifier les lacunes de qualité récurrentes, proposer des améliorations des flux de travail et contribuer à mettre en place des processus QA évolutifs pour les projets d'entraînement de l'IA en astronomie/astrophysique.

Ce que nous recherchons

• Licence, master ou doctorat en astronomie, astrophysique, physique, sciences de l'espace, sciences planétaires, cosmologie ou dans un domaine étroitement lié.
• Maîtrise de la langue anglaise pour suivre les lignes directrices du projet, communiquer avec les équipes et fournir des retours écrits clairs.
• 3+ années d'expérience en recherche en astronomie/astrophysique, enseignement, communication scientifique, révision académique, analyse de données, travail en observatoire ou flux de travail scientifiques connexes.
• Solide compréhension de la mécanique céleste, de l'évolution stellaire, des galaxies, de la cosmologie, du rayonnement électromagnétique, des méthodes observationnelles, de la spectroscopie, des systèmes planétaires, des trous noirs et de l'incertitude scientifique.
• Capacité à évaluer du contenu en astronomie/astrophysique par rapport à des grilles d'évaluation détaillées et à identifier des problèmes tels que des hypothèses physiques incorrectes, des unités erronées, des calculs défectueux, des faits hallucinés, des explications trompeuses ou des conclusions trop simplifiées.
• Une familiarité avec des outils ou méthodes tels que Python, les jeux de données astronomiques, les données de télescopes/observatoires, la spectroscopie, la photométrie, les simulations, LaTeX, les notebooks Jupyter ou la visualisation scientifique est préférée.
• Une expérience de direction ou de soutien d'équipes à distance de chercheurs, d'éducateurs, de réviseurs, d'annotateurs, de rédacteurs scientifiques ou de QA est fortement préférée.
• À l'aise pour travailler dans des environnements à distance au rythme rapide, à l'aide d'outils tels que Discord, Google Sheets, Google Docs, les tableaux de suivi, les tableaux de bord et les systèmes de gestion de projet.
• Très soucieux du détail et organisé, avec la capacité de tenir à jour les guides de style, les FAQ, les tableaux de suivi, les supports d'intégration, les tâches de calibration et la documentation.
• Une expérience en entraînement de l'IA, annotation de données, évaluation de LLM, QA scientifique, révision académique ou révision fondée sur des grilles d'évaluation est un atout majeur.