SWE-Bench-taakauditor

$70–$90/uur USDMercorWerklocatie: Op afstand — Verenigde StatenOp afstandAlleen inwoners van de Verenigde Staten

Deze vacature is automatisch vertaald. Het oorspronkelijke platform behandelt sollicitaties; controleer de oorspronkelijke eisen voordat je solliciteert. Oorspronkelijke pagina bekijken

In het kort

Je beoordeelt software-engineering benchmarktaken waarmee de modellen van een frontier-AI-lab worden getraind en geëvalueerd: repository-taken, referentiepatches, testharnassen en de integriteit van de beoordeling, met duidelijke schriftelijke rubriekfeedback. Je hebt 3+ jaar professionele software-engineering nodig en echte open-sourcebijdrage- of maintainerervaring.

Samenvatting door AI geschreven op basis van de oorspronkelijke vacature.

Over de functie

Evalueer de kwaliteit, juistheid en reproduceerbaarheid van benchmarktaken voor software-engineering die worden gebruikt om de modellen van een frontier-AI-lab te trainen en te evalueren. U beoordeelt taken op repositoryniveau, referentiepatches, testharnassen en integriteit van de beoordeling — en geeft duidelijke, op rubrics gebaseerde schriftelijke feedback.

Basiskwalificaties

  • 3+ jaar professionele software-engineering
  • Echte open-sourcebijdragen of ervaring als maintainer (gemergede PR's, rollen als committer / maintainer)
  • Sterk vermogen om referentiepatches, testrunners en Docker-isolatie te auditen en antwoordlekken / reward hacking op te sporen
  • Vlotte beheersing van gangbare ecosystemen (Python en ten minste een van Java / Go / TypeScript / C++)

Gewenste kwalificaties

  • Vertrouwdheid met SWE-Bench (Verified) of vergelijkbare repositorybenchmarks
  • Staat van dienst als maintainer van grote Python-OSS-projecten (Django, Flask, scikit-learn, sympy, pytest, enz.)
  • Eerdere ervaring met codereview of het beoordelen van taken
Landen van kandidaten
Alleen inwoners van de Verenigde Staten

De vacature vereist dat kandidaten in de Verenigde Staten wonen. Bekijk de oorspronkelijke vacature voor aanvullende eisen.

Vermelde openstaande plaatsen
3
Werkvorm
Op afstand
Vermelde werklocatie
Op afstand — Verenigde Staten
Oorspronkelijk geplaatst
2026-08-28
Laatst gecontroleerd

Hoe deze vergoeding zich verhoudt

Softwareontwikkeling: gebruikelijk uurtarief per platform, november 2026.

Deze functie $70–$90/uur USDGebruikelijk bij Mercor $85/uur USDGebruikelijk op alle platforms $63/uur USD

  • MercorDit platform$85/uur USD37 functiesMiddelste helft van de functies: $65–$110/uur USD
  • micro1$80/uur USD40 functiesMiddelste helft van de functies: $65–$91/uur USD
  • Alignerr$63/uur USD132 functiesMiddelste helft van de functies: $60–$75/uur USD
  • Meridial$37/uur USD48 functiesMiddelste helft van de functies: $36–$37/uur USD
  • SME Careers$60/uur USD52 functiesMiddelste helft van de functies: $24–$70/uur USD
  • Handshake AI$78/uur USD12 functiesMiddelste helft van de functies: $73–$121/uur USD
  • Alpheva$205/uur USD7 functiesMiddelste helft van de functies: $189–$225/uur USD
  • Anyone AI$63/uur USD78 functiesMiddelste helft van de functies: $63–$63/uur USD

Gebaseerd op 407 functies met uurloon, vermeld in november 2026. Tarieven per taak of project zijn niet meegenomen. Elk platform bepaalt zijn eigen vergoeding.

Meer vacatures in dit vakgebied →