À propos du poste
Dans ce rôle de contractant à distance rémunéré à l'heure, vous travaillerez comme responsable de l'assurance qualité en informatique et en TI (QAL) afin de superviser la qualité, la cohérence et la performance des formateurs sur des projets d'entraînement d'IA en informatique, TI, logiciels, systèmes et domaines techniques. Vous examinerez du contenu informatique/TI généré par l'IA ainsi que le travail des formateurs/assurance qualité, évaluerez la qualité des résultats par rapport aux lignes directrices du projet, fournirez une rétroaction écrite précise et veillerez à ce que tous les contributeurs respectent les normes de qualité attendues.
Vous évaluerez le travail sur le plan de l'exactitude technique, de la justesse conceptuelle, du raisonnement sur le code et les systèmes, de la qualité de la terminologie, de la logique de dépannage, de la sensibilisation à la sécurité, de la clarté, du formatage, du respect des instructions et de l'adhésion aux grilles d'évaluation propres au projet. Vous repérerez les problèmes de qualité récurrents, communiquerez les mises à jour aux formateurs et aux QAs, soutiendrez l'intégration, tiendrez la documentation et aiderez à activer les contributeurs qui ne travaillent pas de façon constante. Ce rôle exige une solide expertise en informatique/TI, de fortes compétences de communication en anglais, une excellente attention aux détails, une communication structurée et la capacité de gérer des flux de travail qualité au sein d'équipes techniques à distance.
Ce rôle est au sein de SME Careers, une entreprise de services de données pour l'IA en forte croissance et filiale de SuperAnnotate, qui fournit des données d'entraînement à nombre des plus grandes entreprises d'IA et laboratoires de modèles de fondation au monde. Votre leadership qualité en informatique et en TI contribuera directement à améliorer les meilleurs modèles d'IA au monde en veillant à ce que les données d'entraînement techniques soient exactes, logiquement solides, clairement expliquées, bien documentées et alignées sur les attentes des clients.
Ce que vous ferez
- Suivi de la qualité : effectuer des contrôles ponctuels des éléments d'informatique et de TI, identifier les problèmes de qualité, fournir une rétroaction continue par messages privés et faire remonter les problèmes récurrents ou critiques.
- Révision technique : évaluer les explications générées par l'IA, les extraits de code, les étapes de dépannage, le contenu de conception de systèmes, les conseils sur les bases de données, les réponses en réseautique, le contenu lié à la sécurité et le raisonnement technique pour leur exactitude et leur clarté.
- Communication avec les formateurs et les QAs : informer les formateurs et les QAs sur Discord des nouvelles lignes directrices relatives aux éléments, des changements de projet, des mises à jour des flux de travail, des attentes de qualité et des normes de révision technique.
- Gestion des questions : répondre clairement et rapidement aux questions des formateurs/QAs, en particulier sur les concepts de programmation, le débogage, les flux de travail TI, le comportement des systèmes, la réseautique, les bases de données, la sécurité et l'interprétation des grilles d'évaluation.
- Gestion de l'activation des formateurs/QAs : envoyer des messages privés aux contributeurs inactifs ou qui ne travaillent pas, encourager l'activation, suivre les relances et signaler les problèmes de disponibilité au besoin.
- Documentation : créer et tenir la documentation des projets d'informatique/TI, y compris les guides de style, les tableaux de suivi, les FAQ, les notes de qualité, les exemples, les honeypots, les tâches de calibration et les documents d'intégration.
- Intégration et entraînement : planifier et animer des appels d'intégration/d'entraînement avec les formateurs et les QAs pour expliquer les attentes du projet, les flux de travail, les grilles d'évaluation, les normes de qualité et les exigences de révision technique.
- Alignement de la qualité : veiller à ce que tous les formateurs et QAs appliquent les lignes directrices d'informatique/TI de façon cohérente et comprennent les mises à jour à mesure que les projets évoluent.
- Révision des risques : signaler les recommandations trompeuses, non sécurisées, non exécutables, hallucinées, obsolètes ou techniquement dangereuses.
- Amélioration des processus : identifier les lacunes de qualité récurrentes, proposer des améliorations des flux de travail et aider à mettre en place des processus d'assurance qualité évolutifs pour les projets d'entraînement d'IA en informatique et en TI.
- Maîtrise native du pendjabi
Ce que nous recherchons
- Baccalauréat, maîtrise ou expérience professionnelle équivalente en informatique, technologies de l'information, génie logiciel, systèmes d'information, cybersécurité, science des données ou domaine technique étroitement connexe.
- Solide maîtrise de la langue anglaise pour suivre les lignes directrices du projet, communiquer avec les équipes et fournir une rétroaction écrite claire.
- 3+ ans d'expérience en développement logiciel, soutien TI, administration de systèmes, réseautique, cybersécurité, flux de travail de données, éducation technique, rédaction technique, assurance qualité ou flux de travail connexes de révision technique.
- Solide compréhension des fondamentaux de l'informatique et de la TI, y compris les concepts de programmation, les algorithmes, les structures de données, les systèmes d'exploitation, les bases de données, la réseautique, les notions de base du nuage, les principes de sécurité, les API, le débogage et le dépannage.
- Capacité d'évaluer du contenu technique par rapport à des grilles d'évaluation détaillées et d'identifier des problèmes tels que la logique de code erronée, des étapes de dépannage défectueuses, des commandes/API hallucinées, des risques de sécurité, une terminologie incorrecte, des hypothèses non étayées ou des explications incomplètes.
- Familiarité avec les outils et environnements courants tels que Git/GitHub, les EDI, les terminaux, Linux/Windows/macOS, SQL, les plateformes infonuagiques, les API REST, Docker, les outils de réseautique et les systèmes de billetterie/soutien est préférée.
- Expérience de direction ou de soutien d'équipes à distance d'ingénieurs, de spécialistes TI, de réviseurs, d'annotateurs, de formateurs, d'éducateurs ou de QAs est fortement préférée.
- À l'aise de travailler dans des environnements à distance en évolution rapide avec des outils tels que Discord, Google Sheets, Google Docs, des tableaux de suivi, des tableaux de bord, GitHub et des systèmes de gestion de projet.
- Très soucieux des détails et organisé, avec la capacité de tenir des guides de style, des FAQ, des tableaux de suivi, des documents d'intégration, des honeypots, des tâches de calibration et de la documentation.
- Une expérience en entraînement d'IA, annotation de données, évaluation de LLM, assurance qualité technique, révision de code, révision de connaissances TI ou révision fondée sur des grilles d'évaluation est un atout majeur.