SWE-Bench-Task-Auditor

$70–$90/Stunde USDMercorArbeitsort: Remote — USARemoteNur in den USA ansässige Personen

Diese Anzeige wurde automatisch übersetzt. Die Originalplattform bearbeitet Bewerbungen; prüfen Sie vor der Bewerbung deren ursprüngliche Anforderungen. Originalseite ansehen

Auf einen Blick

Sie bewerten Software-Engineering-Benchmark-Aufgaben, mit denen Modelle eines Frontier-KI-Labors trainiert und evaluiert werden: repository-basierte Aufgaben, Referenz-Patches, Test-Harnesses und die Integrität der Bewertung, mit klarem schriftlichem Feedback nach Rubrik. Voraussetzung sind 3+ Jahre professionelle Softwareentwicklung und echte Open-Source-Beitrags- oder Maintainer-Erfahrung.

Von KI aus der Originalanzeige zusammengefasst.

  • Entspricht den typischen $85/Stunde USD für ähnliche Stellen auf Mercor Zum Vergütungsvergleich ↓
  • Veröffentlicht am 28. Aug. 2026 · 3 offene Plätze angegeben

Über die Stelle

Evaluieren Sie die Qualität, Korrektheit und Reproduzierbarkeit von Benchmark-Aufgaben im Software Engineering, die zum Training und zur Evaluierung der Modelle eines Frontier-KI-Labors verwendet werden. Sie beurteilen Aufgaben auf Repository-Ebene, Referenz-Patches, Test-Harnesses und die Integrität der Bewertung — und geben klares, rubrikbasiertes schriftliches Feedback.

Grundlegende Qualifikationen

  • 3+ Jahre professionelles Software Engineering
  • Echte Open-Source-Beiträge oder Maintainer-Erfahrung (gemergte PRs, Committer-/Maintainer-Rollen)
  • Ausgeprägte Fähigkeit, Referenz-Patches, Test-Runner und Docker-Isolation zu auditieren und Antwort-Leakage / Reward Hacking zu erkennen
  • Sicherer Umgang mit gängigen Ökosystemen (Python und mindestens eines von Java / Go / TypeScript / C++)

Bevorzugte Qualifikationen

  • Vertrautheit mit SWE-Bench (Verified) oder ähnlichen Repository-Benchmarks
  • Maintainer-Historie bei großen Python-OSS-Projekten (Django, Flask, scikit-learn, sympy, pytest usw.)
  • Frühere Erfahrung im Code-Review oder in der Aufgabenbewertung
Bewerberländer
Nur in den USA ansässige Personen

Die Anzeige verlangt einen Wohnsitz in den Vereinigten Staaten. Weitere Anforderungen finden Sie in der Originalanzeige.

Gemeldete offene Stellen
3
Arbeitsmodell
Remote
Angegebener Arbeitsort
Remote — USA
Ursprünglich veröffentlicht
2026-08-28
Zuletzt geprüft

So schneidet diese Vergütung ab

Softwareentwicklung: typischer Stundensatz auf jeder Plattform, November 2026.

Diese Stelle $70–$90/Stunde USDTypisch bei Mercor $85/Stunde USDTypisch über alle Plattformen $63/Stunde USD

  • MercorDiese Plattform$85/Stunde USD37 StellenMittlere Hälfte der Stellen: $65–$110/Stunde USD
  • micro1$80/Stunde USD40 StellenMittlere Hälfte der Stellen: $65–$91/Stunde USD
  • Alignerr$63/Stunde USD132 StellenMittlere Hälfte der Stellen: $60–$75/Stunde USD
  • Meridial$37/Stunde USD48 StellenMittlere Hälfte der Stellen: $36–$37/Stunde USD
  • SME Careers$60/Stunde USD52 StellenMittlere Hälfte der Stellen: $24–$70/Stunde USD
  • Handshake AI$78/Stunde USD12 StellenMittlere Hälfte der Stellen: $73–$121/Stunde USD
  • Alpheva$205/Stunde USD7 StellenMittlere Hälfte der Stellen: $189–$225/Stunde USD
  • Anyone AI$63/Stunde USD78 StellenMittlere Hälfte der Stellen: $63–$63/Stunde USD

Basierend auf 407 stundenweise bezahlten Stellen, gelistet im November 2026. Aufgaben- und Projektsätze sind nicht enthalten. Jede Plattform legt ihre Vergütung selbst fest.

Bei Mercor bewerben ↗
Weitere Stellen in diesem Fachgebiet →