À propos du poste
Évaluateur de qualité – Anglais
Contribuez à façonner l'avenir de l'IA en évaluant et en comparant les réponses de modèles d'IA avancés.
- Lieu : À distance
- Type : Prestataire indépendant / Temps partiel
- Engagement : jusqu'à 3 mois
- Rémunération : $7-$12/heure
À propos du poste
Chez Anyone AI, nous créons des données d'entraînement et d'évaluation de haute qualité pour les modèles d'IA de pointe.
Nous recherchons des experts maîtrisant l'anglais, dotés de solides compétences rédactionnelles, d'un esprit critique et d'une vaste expérience pratique de l'utilisation de grands modèles de langage (LLM).
Dans ce rôle, vous interagirez directement avec des modèles d'IA et comparerez leurs réponses côte à côte afin de déterminer laquelle répond le mieux aux besoins de l'utilisateur. Vos évaluations et explications écrites contribueront à améliorer l'exactitude, l'utilité et la fiabilité des systèmes d'IA.
Ce que vous ferez
- Interagir avec différents modèles et outils d'IA sur un large éventail d'invites et de sujets.
- Comparer côte à côte deux ou plusieurs réponses générées par l'IA.
- Évaluer l'exactitude, l'utilité, le respect des instructions, la clarté et la qualité globale des réponses.
- Suivre des directives d'évaluation détaillées et des flux de travail d'évaluation à plusieurs étapes.
- Rédiger des explications claires et bien argumentées à l'appui de vos décisions d'évaluation.
- Appliquer les critères d'évaluation de manière cohérente d'une tâche à l'autre.
Ce que nous recherchons
- Maîtrise de l'anglais, avec une forte compréhension écrite et de solides compétences rédactionnelles.
- Vaste expérience pratique de l'utilisation de LLM et de l'évaluation critique de leurs résultats.
- Solide jugement analytique et capacité à peser plusieurs dimensions de la qualité des réponses.
- Excellent souci du détail et capacité à suivre attentivement des instructions complexes.
- Capacité à expliquer clairement et de manière convaincante les décisions d'évaluation.
- Aisance à passer d'un modèle d'IA et d'un outil à l'autre, ainsi qu'entre des flux de travail à plusieurs étapes.
Atouts appréciés
- Expérience préalable en évaluation de réponses d'IA, annotation de données ou assurance qualité.
- Expérience en édition, recherche, vérification des faits ou rédaction analytique.
- Connaissance des grilles d'évaluation et des tâches de comparaison côte à côte.