Auditeur de tâches SWE-Bench

$70–$90/heure USDMercorLieu du poste : À distance — États-UnisÀ distanceRésidents des États-Unis uniquement

Cette offre a été traduite automatiquement. La plateforme d’origine gère les candidatures ; vérifiez ses critères originaux avant de postuler. Voir la page d’origine

En bref

Vous évaluez des tâches de benchmark en ingénierie logicielle utilisées pour l'entraînement et l'évaluation des modèles d'un laboratoire d'IA, en auditant tâches au niveau dépôt, patches de référence, harnais de test et intégrité de la notation, et en rédigeant des retours écrits selon une grille. Il faut 3+ ans d'ingénierie logicielle professionnelle et une réelle expérience de contribution ou de mainteneur open source.

Résumé rédigé par IA à partir de l’offre d’origine.

À propos du poste

Évaluez la qualité, la justesse et la reproductibilité de tâches de benchmark en génie logiciel utilisées pour entraîner et évaluer les modèles d'un laboratoire d'IA de pointe. Vous évaluerez des tâches au niveau du dépôt, des correctifs de référence, des harnais de test et l'intégrité de la notation — et fournirez des retours écrits clairs, fondés sur une grille d'évaluation.

Qualifications de base

  • Au moins 3 ans d'ingénierie logicielle professionnelle
  • Contribution réelle à l'open source ou expérience de mainteneur (PR fusionnées, rôles de committer / mainteneur)
  • Forte capacité à auditer des correctifs de référence, des exécuteurs de tests et l'isolation Docker, et à détecter les fuites de réponses / le détournement de récompense (reward hacking)
  • Aisance dans les écosystèmes courants (Python et au moins l'un de Java / Go / TypeScript / C++)

Qualifications souhaitées

  • Connaissance de SWE-Bench (Verified) ou de benchmarks de dépôts similaires
  • Parcours de mainteneur sur de grands projets OSS Python (Django, Flask, scikit-learn, sympy, pytest, etc.)
  • Expérience préalable de la relecture de code ou de la notation de tâches
Pays des candidats
Résidents des États-Unis uniquement

L’offre exige que les candidats résident aux États-Unis. Consultez l’offre d’origine pour les autres critères.

Postes ouverts annoncés
3
Modalités de travail
À distance
Lieu de travail annoncé
À distance — États-Unis
Publication initiale
2026-08-28
Dernière vérification

Comment se situe cette rémunération

Génie logiciel : rémunération horaire typique sur chaque plateforme, novembre 2026.

Ce poste $70–$90/heure USDTypique sur Mercor $85/heure USDTypique toutes plateformes $63/heure USD

  • MercorCette plateforme$85/heure USD37 offresMoitié centrale des offres : $65–$110/heure USD
  • micro1$80/heure USD40 offresMoitié centrale des offres : $65–$91/heure USD
  • Alignerr$63/heure USD132 offresMoitié centrale des offres : $60–$75/heure USD
  • Meridial$37/heure USD48 offresMoitié centrale des offres : $36–$37/heure USD
  • SME Careers$60/heure USD52 offresMoitié centrale des offres : $24–$70/heure USD
  • Handshake AI$78/heure USD12 offresMoitié centrale des offres : $73–$121/heure USD
  • Alpheva$205/heure USD7 offresMoitié centrale des offres : $189–$225/heure USD
  • Anyone AI$63/heure USD78 offresMoitié centrale des offres : $63–$63/heure USD

Calculé sur 407 offres payées à l’heure publiées en novembre 2026. Les tarifs à la tâche et au projet ne sont pas inclus. Chaque plateforme fixe sa propre rémunération.

Plus d’offres dans cette spécialité →