Responsable de l'assurance qualité en philosophie (QAL)

Dans ce rôle de sous-traitant horaire et à distance, vous agirez en tant que Responsable de l'assurance qualité en philosophie (QAL) pour superviser la qualité, la cohérence et la performance des entraîneurs sur des projets d'entraînement d'IA axés sur la philosophie. Vous examinerez le contenu philosophique généré par l'IA ainsi que le travail des entraîneurs et de l'AQ, évaluerez la qualité des résultats par rapport aux lignes directrices du projet, fournirez des retours écrits précis et veillerez à ce que tous les contributeurs respectent les normes de qualité attendues.

Vous évaluerez le travail sur le plan de l'exactitude conceptuelle, de la structure argumentative, de la validité logique, du contexte philosophique, de la qualité de l'interprétation, de la clarté, de la nuance, du formatage, du respect des instructions et de l'adhésion aux grilles d'évaluation propres au projet. Vous repérerez les problèmes de qualité récurrents, communiquerez les mises à jour aux entraîneurs et aux AQ, soutiendrez l'intégration, tiendrez la documentation et aiderez à activer les contributeurs qui ne travaillent pas de manière régulière. Ce rôle exige une solide expertise en philosophie, de solides compétences de communication en anglais, une excellente attention aux détails, une communication structurée et la capacité de gérer des flux de travail qualité au sein d'équipes d'experts à distance.

Ce rôle s'inscrit chez SME Careers, une entreprise de services de données d'IA en forte croissance et filiale de SuperAnnotate, qui fournit des données d'entraînement à bon nombre des plus grandes entreprises d'IA et laboratoires de modèles de fondation au monde. Votre leadership en qualité philosophique contribuera directement à améliorer les meilleurs modèles d'IA au monde en veillant à ce que les données d'entraînement philosophique soient conceptuellement précises, logiquement solides, bien contextualisées, nuancées et alignées sur les attentes des clients.

Le processus de sélection comprend un entretien mené par IA, une tâche spécifique au domaine et un entretien avec un recruteur.

Important : Il n'y a pas de projet immédiat pour ce rôle ; toutefois, si vous êtes qualifié, vous ferez partie des premiers experts que nous contacterons lorsque des opportunités pertinentes se présenteront. Cela vous donnera également accès à de futurs projets disponibles via notre réseau d'experts.

Ce que vous ferez

• Suivi de la qualité : effectuer des contrôles ponctuels des éléments de philosophie, identifier les problèmes de qualité, fournir des retours continus par messages privés et escalader les problèmes récurrents ou critiques.
• Révision philosophique : évaluer les explications philosophiques, analyses d'arguments, raisonnements éthiques, résumés de philosophes, problèmes de logique et comparaisons conceptuelles générés par l'IA pour en vérifier l'exactitude et la rigueur.
• Communication avec les entraîneurs et les AQ : informer les entraîneurs et les AQ sur Discord des nouvelles lignes directrices des éléments, des changements de projet, des mises à jour des flux de travail, des attentes en matière de qualité et des normes de révision propres à la philosophie.
• Traitement des questions : répondre clairement et rapidement aux questions des entraîneurs et des AQ, en particulier sur la validité des arguments, les distinctions conceptuelles, les traditions philosophiques, l'interprétation, l'éthique, la logique et l'interprétation des grilles d'évaluation.
• Gestion de l'activation des entraîneurs et des AQ : envoyer des messages privés aux contributeurs inactifs ou qui ne travaillent pas, encourager l'activation, suivre les relances et signaler les problèmes de disponibilité lorsque nécessaire.
• Documentation : créer et tenir la documentation des projets de philosophie, notamment les guides de style, les tableaux de suivi, les FAQ, les notes de qualité, les exemples, les honeypots, les tâches de calibration et les supports d'intégration.
• Intégration et entraînement : planifier et animer des appels d'intégration et d'entraînement avec les entraîneurs et les AQ pour expliquer les attentes du projet, les flux de travail, les grilles d'évaluation, les normes de qualité et les exigences de révision propres à la philosophie.
• Alignement qualité : veiller à ce que tous les entraîneurs et AQ appliquent de manière cohérente les lignes directrices de révision philosophique et comprennent les mises à jour à mesure que les projets évoluent.
• Révision du raisonnement et de l'éthique : signaler le contenu philosophique invalide, trompeur, biaisé, excessivement confiant, mal argumenté ou éthiquement superficiel.
• Amélioration des processus : identifier les lacunes de qualité récurrentes, proposer des améliorations des flux de travail et aider à mettre en place des processus d'AQ évolutifs pour les projets d'entraînement d'IA en philosophie.

Ce que nous recherchons

• Licence, master ou doctorat en philosophie, éthique, logique, théorie politique, sciences humaines, sciences religieuses, lettres classiques, sciences cognitives ou dans un domaine étroitement apparenté.
• Solide maîtrise de la langue anglaise pour suivre les lignes directrices du projet, communiquer avec les équipes et fournir des retours écrits clairs.
• 3+ ans d'expérience en recherche philosophique, enseignement, rédaction, édition, révision académique, révision éthique, enseignement de la logique ou dans des flux de travail connexes en sciences humaines.
• Solide compréhension des méthodes philosophiques, de la logique, de l'analyse d'arguments, de l'éthique, de l'épistémologie, de la métaphysique, de la philosophie de l'esprit, de la philosophie politique, de l'histoire de la philosophie et de la clarification conceptuelle.
• Capacité à évaluer le contenu philosophique par rapport à des grilles d'évaluation détaillées et à identifier des problèmes tels que des arguments épouvantails, des inférences invalides, une confusion conceptuelle, une simplification excessive, des affirmations non étayées, de fausses équivalences ou une mauvaise représentation des vues des philosophes.
• Une familiarité avec des domaines tels que la logique formelle, la philosophie morale, l'éthique appliquée, la philosophie analytique, la philosophie continentale, la philosophie ancienne, la philosophie politique, la philosophie des sciences ou l'éthique de l'IA est préférée.
• Une expérience de la direction ou du soutien d'équipes à distance de chercheurs, rédacteurs, réviseurs, éducateurs, annotateurs ou AQ est fortement préférée.
• À l'aise pour travailler dans des environnements à distance au rythme soutenu, en utilisant des outils tels que Discord, Google Sheets, Google Docs, des tableaux de suivi, des tableaux de bord et des systèmes de gestion de projet.
• Très soucieux du détail et organisé, avec la capacité de tenir des guides de style, des FAQ, des tableaux de suivi, des supports d'intégration, des tâches de calibration et de la documentation.
• Une expérience de l'entraînement d'IA, de l'annotation de données, de l'évaluation de LLM, de l'AQ académique, de la révision éthique ou de la révision fondée sur des grilles d'évaluation est un atout certain.