À propos du poste
Évaluateur de qualité – Anglais
Contribuez à façonner l'avenir de l'IA en évaluant et en comparant les réponses de modèles d'IA avancés.
- Lieu : À distance
- Type : Contractant indépendant / Temps partiel
- Engagement : jusqu'à 3 mois
- Rémunération : $7-$12/heure
À propos du poste
Chez Anyone AI, nous créons des données d'entraînement et d'évaluation de haute qualité pour les modèles d'IA de pointe.
Nous recherchons des experts maîtrisant l'anglais, dotés de solides compétences rédactionnelles, d'un esprit critique et d'une vaste expérience pratique de l'utilisation de grands modèles de langage (LLM).
Dans ce rôle, vous interagirez directement avec des modèles d'IA et comparerez leurs réponses côte à côte pour déterminer laquelle répond le mieux aux besoins de l'utilisateur. Vos évaluations et explications écrites contribueront à améliorer la précision, l'utilité et la fiabilité des systèmes d'IA.
Ce que vous ferez
- Interagir avec différents modèles et outils d'IA sur un large éventail d'invites et de sujets.
- Comparer deux réponses générées par l'IA ou plus, côte à côte.
- Évaluer la précision, l'utilité, le respect des instructions, la clarté et la qualité globale des réponses.
- Suivre des directives de notation détaillées et des flux de travail d'évaluation en plusieurs étapes.
- Rédiger des explications claires et bien argumentées à l'appui de vos décisions d'évaluation.
- Appliquer les critères d'évaluation de manière cohérente d'une tâche à l'autre.
Ce que nous recherchons
- Maîtrise de l'anglais, avec de solides compétences en compréhension écrite et en rédaction.
- Vaste expérience pratique de l'utilisation des LLM et de l'évaluation critique de leurs résultats.
- Solide jugement analytique et capacité à peser plusieurs dimensions de la qualité des réponses.
- Excellent souci du détail et capacité à suivre attentivement des instructions complexes.
- Capacité à expliquer clairement et de manière convaincante les décisions d'évaluation.
- Aisance à passer d'un modèle d'IA, d'un outil et d'un flux de travail en plusieurs étapes à l'autre.
Atouts appréciés
- Expérience préalable en évaluation de réponses d'IA, annotation de données ou assurance qualité.
- Expérience en édition, recherche, vérification des faits ou rédaction analytique.
- Familiarité avec les grilles d'évaluation et les tâches de comparaison côte à côte.