À propos du poste
Dans ce poste de sous-traitant horaire à distance, vous travaillerez en tant que responsable de l'assurance qualité népalais (QAL) pour superviser la qualité, la cohérence et les performances des entraîneurs sur les projets d'entraînement IA en népalais. Vous examinerez le contenu népalais généré par l'IA et le travail des entraîneurs/QA, évaluerez la qualité des résultats par rapport aux lignes directrices du projet, fournirez des retours écrits précis et vous assurerez que tous les contributeurs respectent les normes de qualité attendues.
Vous évaluerez le travail pour l'exactitude, la fluidité, la grammaire, l'orthographe, le ton, la pertinence culturelle, la préservation du sens, le respect des instructions, le formatage et l'adhésion aux rubriques spécifiques au projet. Vous repérerez les problèmes de qualité récurrents, communiquerez les mises à jour aux entraîneurs et aux QA, soutiendrez l'intégration, tiendrez la documentation à jour et aiderez à activer les contributeurs qui ne travaillent pas de manière régulière. Ce poste exige de solides compétences en népalais et en anglais, une excellente attention aux détails, une communication structurée et la capacité de gérer les flux de travail qualité au sein d'équipes à distance.
Ce poste est chez SME Careers, une entreprise de services de données IA en pleine croissance et filiale de SuperAnnotate, qui fournit des données d'entraînement à bon nombre des plus grandes entreprises d'IA et laboratoires de modèles de fondation au monde. Votre leadership en qualité népalais contribuera directement à améliorer les meilleurs modèles d'IA du monde en veillant à ce que les données d'entraînement en népalais soient naturelles, exactes, culturellement appropriées, bien documentées et alignées sur les attentes des clients.
Ce que vous ferez
- Suivi de la qualité : effectuer des contrôles ponctuels des éléments népalais, identifier les problèmes de qualité, fournir des retours continus par messages privés et escalader les problèmes récurrents ou critiques.
- Communication avec les entraîneurs et les QA : informer les entraîneurs et les QA sur Discord des nouvelles lignes directrices des éléments, des changements de projet, des mises à jour des flux de travail, des attentes en matière de qualité et des normes de révision spécifiques au népalais.
- Gestion des questions : répondre clairement et rapidement aux questions des entraîneurs/QA, notamment sur la grammaire népalaise, le registre, les honorifiques, l'écriture devanagari, la fidélité de la traduction, la terminologie, le contexte culturel et les cas limites.
- Gestion de l'activation des entraîneurs/QA : envoyer des messages privés aux contributeurs inactifs ou qui ne travaillent pas, encourager l'activation, suivre les relances et signaler les problèmes de disponibilité lorsque nécessaire.
- Documentation : créer et tenir à jour la documentation du projet népalais, y compris les guides de style, les tableaux de suivi, les FAQ, les notes de qualité, les exemples, les honeypots, les tâches de calibration et les supports d'intégration.
- Intégration et entraînement : planifier et animer des appels d'intégration/d'entraînement avec les entraîneurs et les QA pour expliquer les attentes du projet, les flux de travail, les rubriques, les normes de qualité et les exigences linguistiques spécifiques au népalais.
- Alignement qualité : veiller à ce que tous les entraîneurs et QA appliquent systématiquement les lignes directrices de la langue népalaise et comprennent les mises à jour à mesure que les projets évoluent.
- Escalade qualité : signaler aux responsables de projet les schémas de mauvaise traduction récurrents, les formulations non naturelles, les affirmations hallucinées, les inadéquations culturelles, la confusion concernant les lignes directrices ou les préoccupations relatives à la qualité des entraîneurs.
- Amélioration des processus : identifier les lacunes de qualité récurrentes, proposer des améliorations des flux de travail et aider à mettre en place des processus QA évolutifs pour les projets d'entraînement IA en langue népalaise.
Ce que nous recherchons
- Licence ou master en mathématiques
- Maîtrise du népalais à un niveau natif ou quasi natif avec de solides compétences en lecture et en écriture.
- Solide maîtrise de l'anglais pour suivre les lignes directrices du projet, communiquer avec les équipes et fournir des retours clairs en anglais.
- 3+ années d'expérience professionnelle en rédaction, édition, traduction, localisation, QA de contenu en népalais, entraînement IA, éducation, annotation ou flux de travail d'examen linguistique connexes.
- Solide compréhension de la grammaire népalaise, des conventions orthographiques, de la ponctuation, de l'écriture devanagari, des honorifiques, des postpositions, des formes verbales, de l'accord, du ton, du registre et du contexte culturel.
- Capacité à évaluer le contenu népalais par rapport à des rubriques détaillées et à identifier des problèmes tels que la mauvaise traduction, les formulations littérales, le ton non naturel, un niveau d'honorifique incorrect, les formulations influencées par l'hindi ou l'anglais, les affirmations hallucinées, l'ambiguïté ou la terminologie incohérente.
- Une expérience de direction ou de soutien d'équipes à distance d'entraîneurs, d'annotateurs, de réviseurs, d'éditeurs ou de QA est fortement préférée.
- À l'aise dans des environnements à distance au rythme soutenu utilisant des outils tels que Discord, Google Sheets, Google Docs, des tableaux de suivi, des tableaux de bord et des systèmes de gestion de projet.
- Très soucieux du détail et organisé, avec la capacité de tenir à jour des guides de style, des FAQ, des tableaux de suivi, des supports d'intégration, des honeypots, des notes de qualité et de la documentation.
- Une expérience en entraînement IA, annotation de données, évaluation de LLM, évaluation de prompts/réponses, QA de localisation, QA de traduction ou révision de LLM basée sur des rubriques est un atout majeur.