Over de functie
Evalueer de kwaliteit en juistheid van door AI ondersteunde softwareontwikkelingstraces die worden gebruikt om de modellen van een frontier-AI-lab te trainen en te evalueren. U beoordeelt end-to-end-codeersessies die zijn gemaakt met AI-ondersteunde ontwikkeltools — waarbij u juistheid, deugdelijkheid van de workflow en redenering beoordeelt — en geeft duidelijke, op rubrics gebaseerde schriftelijke feedback.
Basiskwalificaties
- 3+ jaar professionele softwareontwikkeling
- Praktische ervaring met AI-ondersteunde codeertools en agentische / spec-gedreven workflows (Cursor, GitHub Copilot, Claude Code of vergelijkbaar)
- Sterke vaardigheden in het lezen van code en debuggen binnen full-stack- of backendsystemen
- Het vermogen om meerstaps-codeertrajecten te evalueren op juistheid en best practices
Gewenste kwalificaties
- Ervaring met Kiro of Amazon CodeCatalyst
- Eerder werk bij het evalueren of beoordelen van door AI gegenereerde code
- Bijdragen aan developer tooling