Évaluateurs généralistes de comptes personnels (États-Unis)

À propos de Turing : Basée à San Francisco, en Californie, Turing est le principal accélérateur de recherche au monde pour les laboratoires d’IA de pointe et un partenaire de confiance pour les entreprises internationales qui déploient des systèmes d’IA avancés. Turing accompagne ses clients de deux manières : d’abord, en accélérant la recherche de pointe grâce à des données de haute qualité, à des pipelines d’entraînement avancés et à d’éminents chercheurs en IA spécialisés dans le codage, le raisonnement, les STEM, le multilinguisme, la multimodalité et les agents ; ensuite, en appliquant cette expertise pour aider les entreprises à faire passer l’IA du stade de la preuve de concept à celui d’une intelligence propriétaire, avec des systèmes qui fonctionnent de manière fiable, produisent un impact mesurable et génèrent des résultats durables sur le compte de résultat (P&L).

Présentation du poste :

Nous recherchons des évaluateurs généralistes basés aux États-Unis pour participer aux évaluations de personnalisation de Gemini. Dans ce rôle, les évaluateurs réaliseront des travaux d’évaluation généralistes à l’aide de prompts personnalisés conçus pour récupérer du contexte et des données à travers les applications Google connectées.

Qualifications clés :

• Localisation : doit être actuellement basé aux États-Unis.
• Connectivité des applications : doit être disposé et en mesure de connecter ses applications Google (p. ex. Gmail, Google Photos, Google Agenda, Google Drive, etc.) à Gemini afin de permettre la récupération de données et l’évaluation de prompts personnalisés.
• Périmètre du poste : réaliser des tâches de notation et d’évaluation généralistes, en évaluant les performances du modèle, la récupération de contexte et la qualité des réponses à travers les applications connectées.
• Activité du compte : utilisation active des applications Google standard de type workspace/grand public, avec suffisamment de données/d’historique personnels pour générer et évaluer des prompts de récupération.
• Esprit analytique exceptionnel : capacité à évaluer des réponses d’IA nuancées et à identifier les points forts et les points faibles de la qualité de la personnalisation.
• Souci du détail : forte capacité à examiner les réponses générées par l’IA et à repérer les problèmes ou incohérences subtils.
• Communication : excellentes compétences de communication écrite pour fournir des retours d’évaluation clairs et structurés.
• Autonomie : esprit d’initiative et capacité à travailler de manière autonome dans un environnement à distance.
• Configuration technique : ordinateur de bureau ou portable avec une connexion Internet fiable.

Description :

Dans ce rôle, vous ferez partie d’une équipe chargée d’évaluer la qualité des interactions d’IA personnalisées pour les utilisateurs professionnels. Vos responsabilités au quotidien comprendront :

• Évaluer les réponses générées par l’IA à partir de votre historique d’e-mails professionnels et de l’activité de votre compte professionnel.
• Déterminer si les réponses sont pertinentes, exactes, utiles et personnalisées de manière appropriée.
• Identifier les problèmes liés à une personnalisation incorrecte, à des hypothèses non étayées ou à des recommandations non pertinentes.
• Comparer plusieurs réponses de l’IA et déterminer laquelle offre la meilleure expérience utilisateur globale.
• Fournir des retours d’évaluation clairs, détaillés et bien argumentés pour soutenir l’amélioration des modèles.
• Suivre les consignes du projet afin de garantir des évaluations cohérentes, exactes et de haute qualité.
• Préserver la confidentialité des données et respecter toutes les exigences de confidentialité du projet tout au long du processus d’évaluation.

Formation et expérience

• Licence ou expérience pratique équivalente, dans n’importe quel domaine.
• Une expérience dans l’évaluation d’IA, l’annotation de données, la revue de contenu, l’assurance qualité ou un rôle analytique connexe est souhaitée, mais non obligatoire.

Détails de l’offre :

• Engagement requis : au moins 4 heures par jour et jusqu’à 40 heures par semaine, avec 4 heures de chevauchement avec le fuseau PST.
• Type de collaboration : contractuel indépendant
• Durée de la collaboration : jusqu’à 16 semaines

Processus d’évaluation -

• Les candidats présélectionnés recevront un formulaire d’intérêt pour le poste.
• Les candidats finalement retenus seront contactés avec les prochaines étapes, y compris les exigences en matière de consentement et d’intégration.

Consentement et conformité :

Doit être disposé à accorder les autorisations d’intégration des applications nécessaires au projet et à remplir tous les formulaires de consentement et accords de confidentialité standard.