À propos du poste
Aperçu du projet Nous recherchons des spécialistes techniques expérimentés en génie logiciel (SWE-Bench) pour auditer les tâches utilisées pour entraîner et évaluer les systèmes d'IA. L'objectif de ce projet est de garantir que les flux de travail et les tâches d'entraînement de l'IA sont techniquement rigoureux, pratiques et d'une grande précision dans votre domaine d'expertise spécifique.
Livrables et périmètre du projet
-
Évaluation des tâches : Évaluer si les tâches de génie logiciel sont techniquement exactes, réalistes, résolvables, reproductibles et soutenues par des tests et des critères d'évaluation fiables.
-
Audit technique et retours : Fournir des retours clairs et exploitables sur tout problème d'intégration de base de code, échec de test ou erreur de logique identifié dans les tâches.
Expertise requise
-
Expérience professionnelle démontrable et connaissance technique approfondie en génie logiciel (y compris la navigation dans des bases de code complexes, le développement d'applications réelles et les normes SWE-Bench). (Remarque : les candidats seront considérés pour une seule spécialité en fonction de leur expérience ; une expertise dans d'autres domaines n'est pas requise).
-
Solides compétences analytiques et de résolution de problèmes pour tester, dépanner et évaluer rigoureusement des scénarios techniques complexes.
Nous proposons un taux horaire de 60 $, le taux exact étant déterminé après évaluation de votre expérience, de votre expertise et de votre localisation géographique. En tant que prestataire, vous fournirez un ordinateur sécurisé et une connexion Internet à haut débit ; les avantages parrainés par l'entreprise, tels que l'assurance santé et les congés payés, ne s'appliquent pas.
Type d'emploi : Contrat en freelance
Type de lieu de travail : À distance