À propos du poste
Dans ce rôle de sous-traitant horaire à distance, vous travaillerez en tant que Responsable de l'assurance qualité en neurosciences / sciences cognitives (QAL) pour superviser la qualité, la cohérence et la performance des entraîneurs sur les projets d'entraînement de l'IA en neurosciences et sciences cognitives. Vous examinerez le contenu généré par l'IA en neurosciences/sciences cognitives et le travail des entraîneurs/QA, évaluerez la qualité des résultats par rapport aux directives du projet, fournirez des retours écrits précis et veillerez à ce que tous les contributeurs respectent les normes de qualité attendues.
Vous évaluerez le travail pour l'exactitude scientifique, la précision conceptuelle, la maîtrise de la recherche, la compréhension des méthodes expérimentales, le raisonnement cerveau-comportement, la prudence statistique, la conscience éthique, la clarté, le formatage, le respect des instructions et l'adhésion aux rubriques spécifiques au projet. Vous repérerez les problèmes de qualité récurrents, communiquerez les mises à jour aux entraîneurs et aux QA, soutiendrez l'intégration, tiendrez la documentation et aiderez à activer les contributeurs qui ne travaillent pas de manière constante. Ce rôle exige une solide expertise en neurosciences/sciences cognitives, de solides compétences de communication en anglais, une excellente attention aux détails, une communication structurée et la capacité de gérer les flux de travail qualité au sein d'équipes d'experts à distance.
Ce rôle est au sein de SME Careers, une entreprise de services de données IA en pleine croissance et filiale de SuperAnnotate, qui fournit des données d'entraînement à bon nombre des plus grandes entreprises d'IA et laboratoires de modèles de fondation au monde. Votre leadership qualité en neurosciences/sciences cognitives contribuera directement à améliorer les meilleurs modèles d'IA au monde en garantissant que les données d'entraînement scientifiques sont exactes, conscientes des preuves, éthiquement appropriées, clairement expliquées et alignées sur les attentes des clients.
Le processus de sélection comprend un entretien par IA, une tâche spécifique au domaine et un entretien avec un recruteur.
Important : Il n'y a pas de projet immédiat pour ce rôle ; toutefois, si vous êtes qualifié, vous ferez partie des premiers experts que nous contacterons lorsque des opportunités pertinentes se présenteront. Cela vous donnera également accès à de futurs projets disponibles via notre réseau d'experts.
Ce que vous ferez
- Suivi de la qualité : effectuer des contrôles ponctuels des éléments de neurosciences/sciences cognitives, identifier les problèmes de qualité, fournir des retours continus par messages privés et escalader les problèmes récurrents ou critiques.
- Révision scientifique : évaluer les explications, résumés de recherche, interprétations expérimentales, affirmations cerveau-comportement, applications de théories cognitives et raisonnements étape par étape générés par l'IA en neurosciences/sciences cognitives pour leur exactitude et leur clarté.
- Communication avec les entraîneurs et les QA : informer les entraîneurs et les QA sur Discord des nouvelles directives relatives aux éléments, des changements de projet, des mises à jour des flux de travail, des attentes en matière de qualité et des normes de révision spécifiques aux neurosciences/sciences cognitives.
- Traitement des questions : répondre clairement et rapidement aux questions des entraîneurs/QA, en particulier concernant les mécanismes neuronaux, la cognition, la conception expérimentale, l'interprétation statistique, les limites éthiques, la prudence clinique et l'interprétation des rubriques.
- Gestion de l'activation des entraîneurs/QA : envoyer des messages privés aux contributeurs inactifs ou qui ne travaillent pas, encourager l'activation, suivre les relances et signaler les problèmes de disponibilité si nécessaire.
- Documentation : créer et tenir la documentation des projets de neurosciences/sciences cognitives, y compris les guides de style, les tableaux de suivi, les FAQ, les notes de qualité, les exemples, les honeypots, les tâches de calibration et les supports d'intégration.
- Intégration et entraînement : planifier et animer des appels d'intégration/d'entraînement avec les entraîneurs et les QA pour expliquer les attentes du projet, les flux de travail, les rubriques, les normes de qualité et les exigences de révision spécifiques aux neurosciences/sciences cognitives.
- Alignement de la qualité : veiller à ce que tous les entraîneurs et QA appliquent de manière cohérente les directives de révision en neurosciences/sciences cognitives et comprennent les mises à jour à mesure que les projets évoluent.
- Révision de sécurité et d'éthique : signaler les affirmations pseudoscientifiques, trop confiantes, cliniquement trompeuses, éthiquement problématiques ou non étayées concernant le cerveau, la cognition, le comportement ou la santé mentale.
- Amélioration des processus : identifier les lacunes de qualité récurrentes, proposer des améliorations des flux de travail et aider à mettre en place des processus QA évolutifs pour les projets d'entraînement de l'IA en neurosciences/sciences cognitives.
Ce que nous recherchons
- Licence, master, doctorat, MD/PhD ou formation professionnelle équivalente en neurosciences, sciences cognitives, psychologie, neurobiologie, psychologie cognitive, neurosciences computationnelles, recherche adjacente à la neurologie, biologie, sciences biomédicales ou un domaine étroitement lié.
- Maîtrise solide de la langue anglaise pour suivre les directives du projet, communiquer avec les équipes et fournir des retours écrits clairs.
- 3+ ans d'expérience en recherche en neurosciences/sciences cognitives, enseignement, travail en laboratoire, révision académique, communication scientifique, conception expérimentale, analyse de données ou flux de travail scientifiques connexes.
- Solide compréhension des systèmes neuronaux, de la cognition, de la perception, de l'attention, de la mémoire, de l'apprentissage, du langage, de la prise de décision, de la neuroanatomie, de la signalisation neuronale, des méthodes de recherche et des relations cerveau-comportement.
- Capacité à évaluer le contenu en neurosciences/sciences cognitives par rapport à des rubriques détaillées et à identifier des problèmes tels que les neuromythes, les affirmations excessives, les conclusions causales non étayées, l'interprétation erronée d'études, la terminologie incorrecte, la pseudoscience ou les implications cliniques trompeuses.
- Familiarité avec des outils ou méthodes tels que l'EEG, l'IRMf, les expériences comportementales, la modélisation computationnelle, l'évaluation neuropsychologique, les statistiques, Python/R/MATLAB, les tâches cognitives ou la revue de littérature est préférée.
- Expérience dans la direction ou le soutien d'équipes à distance de chercheurs, réviseurs, éducateurs, annotateurs, rédacteurs scientifiques ou QA est fortement préférée.
- À l'aise pour travailler dans des environnements à distance en évolution rapide utilisant des outils tels que Discord, Google Sheets, Google Docs, des tableaux de suivi, des tableaux de bord et des systèmes de gestion de projet.
- Très soucieux du détail et organisé, avec la capacité de tenir des guides de style, des FAQ, des tableaux de suivi, des supports d'intégration, des tâches de calibration et de la documentation.
- Expérience en entraînement de l'IA, annotation de données, évaluation de LLM, QA scientifique, révision académique, révision de contenu en psychologie/neurosciences ou révision basée sur des rubriques est un atout majeur.