À propos du poste
Dans ce rôle de sous-traitant horaire à distance, vous travaillerez en tant que Responsable de l'assurance qualité en psychologie (QAL) pour superviser la qualité, la cohérence et la performance des entraîneurs sur des projets d'entraînement d'IA axés sur la psychologie. Vous examinerez le contenu psychologique généré par l'IA ainsi que le travail des entraîneurs et de l'assurance qualité, évaluerez la qualité des résultats par rapport aux directives du projet, fournirez des retours écrits précis et veillerez à ce que tous les contributeurs respectent les normes de qualité attendues.
Vous évaluerez le travail sous l'angle de l'exactitude psychologique, de l'application des théories, de la maîtrise de la recherche, de la conscience éthique, de la sécurité en matière de santé mentale, de la prudence diagnostique, de la clarté, du formatage, du respect des consignes et de l'adhésion aux grilles d'évaluation propres au projet. Vous repérerez les problèmes de qualité récurrents, communiquerez les mises à jour aux entraîneurs et aux personnes chargées de l'assurance qualité, soutiendrez l'intégration, tiendrez à jour la documentation et aiderez à mobiliser les contributeurs qui ne travaillent pas de manière régulière. Ce rôle exige une solide expertise en psychologie, de bonnes compétences de communication en anglais, une excellente attention aux détails, une communication structurée et la capacité de gérer des flux de travail qualité au sein d'équipes d'experts à distance.
Ce rôle s'exerce au sein de SME Careers, une entreprise de services de données pour l'IA en forte croissance et filiale de SuperAnnotate, qui fournit des données d'entraînement à nombre des plus grandes entreprises d'IA et laboratoires de modèles de base du monde. Votre leadership en matière de qualité psychologique contribuera directement à améliorer les meilleurs modèles d'IA au monde en veillant à ce que les données d'entraînement en psychologie soient exactes, éthiques, dûment prudentes, fondées sur la recherche et alignées sur les attentes des clients.
Le processus de sélection comprend un entretien mené par l'IA, une tâche spécifique au domaine et un entretien avec un recruteur.
Important : Il n'y a pas de projet immédiat pour ce rôle ; toutefois, si votre profil est retenu, vous ferez partie des premiers experts que nous contacterons lorsque des opportunités pertinentes se présenteront. Cela vous donnera également accès aux futurs projets disponibles via notre réseau d'experts.
Ce que vous ferez
- Suivi de la qualité : effectuer des contrôles ponctuels des éléments de psychologie, identifier les problèmes de qualité, fournir des retours continus par messages privés et faire remonter les problèmes récurrents ou critiques.
- Révision psychologique : évaluer les explications psychologiques générées par l'IA, le contenu lié à la santé mentale, les résumés de recherche, les conseils comportementaux, les applications théoriques et les réponses sensibles en matière de sécurité, sous l'angle de l'exactitude et de la pertinence.
- Communication avec les entraîneurs et l'assurance qualité : informer les entraîneurs et les personnes chargées de l'assurance qualité sur Discord des nouvelles directives relatives aux éléments, des changements de projet, des mises à jour des flux de travail, des attentes en matière de qualité et des normes de révision propres à la psychologie.
- Traitement des questions : répondre clairement et rapidement aux questions des entraîneurs et de l'assurance qualité, en particulier sur les concepts psychologiques, la qualité des preuves, les limites éthiques, la sécurité en matière de santé mentale, la prudence diagnostique et l'interprétation des grilles d'évaluation.
- Gestion de la mobilisation des entraîneurs et de l'assurance qualité : envoyer des messages privés aux contributeurs inactifs ou qui ne travaillent pas, encourager leur mobilisation, suivre les relances et signaler les problèmes de disponibilité lorsque nécessaire.
- Documentation : créer et tenir à jour la documentation des projets de psychologie, notamment les guides de style, les tableaux de suivi, les FAQ, les notes de qualité, les exemples, les honeypots, les tâches de calibration et les supports d'intégration.
- Intégration et entraînement : planifier et animer des appels d'intégration et d'entraînement avec les entraîneurs et les personnes chargées de l'assurance qualité afin d'expliquer les attentes du projet, les flux de travail, les grilles d'évaluation, les normes de qualité et les exigences de révision propres à la psychologie.
- Alignement qualité : veiller à ce que tous les entraîneurs et toutes les personnes chargées de l'assurance qualité appliquent de manière cohérente les directives de révision en psychologie et comprennent les mises à jour à mesure que les projets évoluent.
- Révision de sécurité et d'éthique : signaler tout contenu psychologique dangereux, excessivement affirmatif, stigmatisant, pseudoscientifique, inapproprié sur le plan diagnostique ou insensible aux situations de crise.
- Amélioration des processus : identifier les lacunes récurrentes en matière de qualité, proposer des améliorations des flux de travail et contribuer à mettre en place des processus d'assurance qualité évolutifs pour les projets d'entraînement d'IA en psychologie.
Ce que nous recherchons
- Licence, master, doctorat, PsyD ou parcours professionnel équivalent en psychologie, psychologie clinique, counseling, sciences du comportement, sciences cognitives, neurosciences, travail social, recherche connexe à la psychiatrie, éducation ou domaine étroitement lié.
- Maîtrise solide de la langue anglaise pour suivre les directives du projet, communiquer avec les équipes et fournir des retours écrits clairs.
- 3+ ans d'expérience en recherche en psychologie, en contextes cliniques ou de counseling, en sciences du comportement, en enseignement, en rédaction académique, en révision de contenu lié à la santé mentale, en évaluation psychologique ou dans des flux de travail connexes.
- Solide compréhension des théories psychologiques, des méthodes de recherche, de la psychologie cognitive et sociale, de la psychologie du développement, de la psychologie anormale, de l'éthique, de la pratique fondée sur les preuves et des considérations de sécurité en matière de santé mentale.
- Capacité à évaluer un contenu psychologique par rapport à des grilles d'évaluation détaillées et à identifier des problèmes tels que le surdiagnostic, les conseils dangereux, les affirmations non étayées, l'interprétation erronée d'études, la pseudoscience, le langage stigmatisant ou les recommandations thérapeutiques inappropriées.
- Une familiarité avec des domaines tels que la TCC, la psychologie du développement, la personnalité, la communication tenant compte des traumatismes, les interventions comportementales, les connaissances en santé mentale, la conception de recherche, les statistiques et les directives éthiques est préférée.
- Une expérience de direction ou de soutien d'équipes à distance de chercheurs, cliniciens, éducateurs, réviseurs, annotateurs ou personnes chargées de l'assurance qualité est fortement préférée.
- À l'aise pour travailler dans des environnements à distance au rythme soutenu, à l'aide d'outils tels que Discord, Google Sheets, Google Docs, tableaux de suivi, tableaux de bord et systèmes de gestion de projet.
- Très soucieux des détails et organisé, avec la capacité de tenir à jour des guides de style, des FAQ, des tableaux de suivi, des supports d'intégration, des tâches de calibration et de la documentation.
- Une expérience en entraînement d'IA, annotation de données, évaluation de LLM, assurance qualité en psychologie, révision de contenu lié à la santé mentale ou révision fondée sur des grilles d'évaluation est un atout majeur.