À propos du poste
Dans ce rôle de contractuel à distance rémunéré à l'heure, vous travaillerez en tant que Responsable de l'assurance qualité médicale (QAL) pour superviser la qualité, la cohérence et la performance des entraîneurs sur des projets d'entraînement d'IA médicale. Vous examinerez le contenu médical généré par l'IA ainsi que le travail des entraîneurs/QA, évaluerez la qualité des résultats par rapport aux lignes directrices du projet, fournirez des retours écrits précis et veillerez à ce que tous les contributeurs respectent les normes de qualité attendues.
Vous évaluerez le travail pour son exactitude médicale, la qualité du raisonnement clinique, la connaissance des lignes directrices, la sensibilisation à la sécurité des patients, l'exactitude de la terminologie, la clarté, la sensibilité aux risques, le formatage, le respect des instructions et l'adhésion aux grilles d'évaluation spécifiques au projet. Vous repérerez les problèmes de qualité récurrents, communiquerez les mises à jour aux entraîneurs et aux QA, soutiendrez l'intégration, tiendrez la documentation et aiderez à activer les contributeurs qui ne travaillent pas de manière régulière. Ce rôle exige une solide expertise médicale, de solides compétences de communication en anglais, une excellente attention aux détails, une communication structurée et la capacité de gérer des flux de travail qualité au sein d'équipes de révision médicale à distance.
Ce rôle est au sein de SME Careers, une entreprise de services de données pour l'IA en forte croissance et filiale de SuperAnnotate, qui fournit des données d'entraînement à nombre des plus grandes entreprises d'IA et laboratoires de modèles de fondation du monde. Votre leadership en qualité médicale contribuera directement à améliorer les meilleurs modèles d'IA du monde en veillant à ce que les données d'entraînement médicales soient exactes, cliniquement solides, clairement expliquées, prudemment adaptées, conscientes des enjeux de sécurité, bien documentées et alignées sur les attentes des clients.
Le processus de sélection comprend un entretien mené par l'IA, une tâche spécifique au domaine et un entretien avec un recruteur.
Important : Il n'y a pas de projet immédiat pour ce rôle ; toutefois, si vous êtes qualifié, vous ferez partie des premiers experts que nous contacterons lorsque des opportunités pertinentes se présenteront. Cela vous donnera également accès à de futurs projets disponibles via notre réseau d'experts.
Ce que vous ferez
- Suivi de la qualité : effectuer des contrôles ponctuels des éléments médicaux, identifier les problèmes de qualité, fournir des retours continus par messages privés et escalader les problèmes récurrents ou critiques.
- Révision médicale : évaluer les explications médicales générées par l'IA, le raisonnement clinique, les réponses destinées aux patients, les analyses de cas, les discussions diagnostiques, les résumés de traitement, le contenu lié aux médicaments et les supports d'éducation à la santé pour leur exactitude, leur clarté et leur prudence appropriée.
- Communication avec les entraîneurs et les QA : informer les entraîneurs et les QA sur Discord des nouvelles lignes directrices relatives aux éléments, des changements de projet, des mises à jour des flux de travail, des attentes en matière de qualité et des normes spécifiques à la révision médicale.
- Traitement des questions : répondre clairement et rapidement aux questions des entraîneurs/QA, notamment sur le raisonnement clinique, la terminologie, les risques pour la sécurité des patients, les affirmations médicales, l'interprétation des lignes directrices, la qualité des preuves et l'application des grilles d'évaluation.
- Gestion de l'activation des entraîneurs/QA : envoyer des messages privés aux contributeurs inactifs ou qui ne travaillent pas, encourager leur activation, suivre les relances et signaler les problèmes de disponibilité lorsque nécessaire.
- Documentation : créer et tenir la documentation des projets médicaux, notamment les guides de style, les tableaux de suivi, les FAQ, les notes de qualité, les exemples, les honeypots, les tâches de calibration et les supports d'intégration.
- Intégration et entraînement : planifier et animer des appels d'intégration/d'entraînement avec les entraîneurs et les QA pour expliquer les attentes du projet, les flux de travail, les grilles d'évaluation, les normes de qualité et les exigences de révision spécifiques à la médecine.
- Alignement qualité : veiller à ce que tous les entraîneurs et QA appliquent les lignes directrices de révision médicale de manière cohérente et comprennent les mises à jour au fur et à mesure de l'évolution des projets.
- Révision des risques et de la sécurité : signaler les résultats médicaux dangereux, trompeurs, trop confiants ou cliniquement inappropriés, en particulier lorsque le contenu pourrait être interprété comme un diagnostic personnalisé, un traitement, des conseils d'urgence, des instructions médicamenteuses ou un avis médical professionnel.
- Amélioration des processus : identifier les lacunes récurrentes en matière de qualité, proposer des améliorations des flux de travail et contribuer à mettre en place des processus QA évolutifs pour les projets d'entraînement d'IA médicale.
Ce que nous recherchons
- Diplôme de médecine tel que MD, DO, MBBS, MBChB ou équivalent ; des diplômes avancés en clinique, biomédical, soins infirmiers, pharmacie ou domaines liés à la santé peuvent être envisagés selon les exigences du projet.
- Maîtrise solide de la langue anglaise pour suivre les lignes directrices du projet, communiquer avec les équipes et fournir des retours clairs de révision médicale en anglais.
- 3+ années d'expérience professionnelle en médecine, pratique clinique, recherche médicale, éducation médicale, documentation clinique, QA de santé, rédaction médicale, révision de lignes directrices ou flux de travail connexes.
- Solide compréhension des sujets médicaux fondamentaux tels que le raisonnement clinique, le diagnostic différentiel, la physiopathologie, la pharmacologie, les diagnostics, les principes de traitement, la sécurité des patients, la médecine fondée sur les preuves, la terminologie médicale et la communication en santé.
- Capacité à évaluer un contenu médical par rapport à des grilles d'évaluation détaillées et à identifier des problèmes tels que des recommandations dangereuses, des faits hallucinés, des mises en garde manquantes, un raisonnement clinique incorrect, des affirmations trop confiantes de diagnostic/traitement, des conseils inappropriés aux patients ou des explications incomplètes.
- Une familiarité avec les flux de travail ou références médicales tels que les lignes directrices cliniques, les parcours diagnostiques, la sécurité des médicaments, la revue de dossiers, les résumés de cas, les supports d'éducation des patients, la littérature médicale et la revue fondée sur les preuves est préférée.
- Une expérience de direction ou de soutien d'équipes à distance d'entraîneurs, d'annotateurs, de réviseurs, de cliniciens, de rédacteurs médicaux, de chercheurs, d'éducateurs ou de QA est fortement préférée.
- À l'aise pour travailler dans des environnements à distance au rythme rapide en utilisant des outils tels que Discord, Google Sheets, Google Docs, des tableaux de suivi, des tableaux de bord et des systèmes de gestion de projet.
- Très soucieux du détail et organisé, avec la capacité de tenir des guides de style, des FAQ, des tableaux de suivi, des supports d'intégration, des honeypots, des tâches de calibration et d'autres documents de qualité.
- Une expérience en entraînement d'IA, annotation de données, grands modèles de langage, évaluation d'invites/réponses, QA de contenu médical ou évaluation de LLM basée sur des grilles d'évaluation est un atout majeur.