Über die Stelle
Evaluieren Sie die Qualität und Korrektheit von KI-gestützten Softwareentwicklungs-Traces, die zum Training und zur Evaluierung der Modelle eines Frontier-KI-Labors verwendet werden. Sie bewerten durchgängige Coding-Sitzungen, die mit KI-gestützten Entwicklertools entstanden sind — und beurteilen dabei Korrektheit, Fundiertheit des Workflows und Argumentation — und geben klares, rubrikbasiertes schriftliches Feedback.
Grundlegende Qualifikationen
- 3+ Jahre professionelle Softwareentwicklung
- Praktische Erfahrung mit KI-gestützten Coding-Tools und agentischen / spezifikationsgetriebenen Workflows (Cursor, GitHub Copilot, Claude Code oder ähnlich)
- Ausgeprägte Fähigkeiten im Lesen und Debuggen von Code in Full-Stack- oder Backend-Systemen
- Fähigkeit, mehrstufige Coding-Verläufe auf Korrektheit und Best Practices zu bewerten
Bevorzugte Qualifikationen
- Erfahrung mit Kiro oder Amazon CodeCatalyst
- Frühere Arbeit in der Bewertung oder Benotung von KI-generiertem Code
- Beiträge zu Entwickler-Tooling