Über die Stelle
Rollenbezeichnung: Senior-KI-Trainer/-in
Art der Rolle: Freiberuflich, Remote
Standort: Nordamerika und Deutschland.
micro1 beauftragt Senior-KI-Trainerinnen und -Trainer, die an einem kundengetriebenen Projekt mitwirken, das die Qualität von KI-Systemen durch Modelltraining und -evaluierung auf Expertenniveau verbessert. In dieser Rolle setzen Sie Ihre generalistische Expertise und Ihre praktische Erfahrung mit KI-Produkten ein, um KI-Systeme der nächsten Generation zu trainieren. Ihre Arbeit prägt, wie Modelle lernen, schlussfolgern und Leistung erbringen – durch hochwertigen, praxisnahen Input.
Wichtigste Aufgaben:
- Bewerten Sie die Leistung von KI-Chat- und -Suchtools unter standardisierten, wiederholbaren Bedingungen.
- Wenden Sie detaillierte Bewertungsrichtlinien an, um Modellantworten genau zu bewerten, zu ranken und zu annotieren, und geben Sie strukturiertes Feedback, das die Modellleistung verbessert.
- Schreiben, verfeinern und stresstesten Sie Prompts, die die Fähigkeiten des Modells ausloten und dabei vielfältige Szenarien, Grenzfälle und Nutzerabsichten abdecken.
- Prüfen Sie Konsistenz und Genauigkeit über Evaluierungen hinweg und korrigieren Sie Abweichungen zwischen Bewertungen und dem zugrunde liegenden Bewertungsraster bzw. den Richtlinien.
- Nutzen Sie KI-Trainingstools und -plattformen, um Ergebnisse festzuhalten und Evaluierungsdatensätze im Einklang mit den Projektstandards und Meilensteinen einzureichen.
- Arbeiten Sie mit den Projekt-Trainerinnen und -Trainern sowie Mitwirkenden zusammen, um Unklarheiten zu beseitigen, Richtlinien zu verfeinern und die Konsistenz der Evaluierung im Team sicherzustellen.
- Beteiligen Sie sich an laufenden Qualitätsprüfungen und arbeiten Sie Feedback ein, um stringente Trainings- und Annotationsstandards zu wahren.
Erforderliche Fähigkeiten und Qualifikationen:
- Außergewöhnliche Detailgenauigkeit und Sorgfalt bei der Prüfung und Bewertung KI-generierter Inhalte.
- Ausgeprägte schriftliche und mündliche Kommunikationsfähigkeiten für wirksame Zusammenarbeit, Berichterstattung und zeitnahe Updates zu Fortschritten und Herausforderungen.
- Nachgewiesene Fähigkeiten in Zeitmanagement und Selbstorganisation für die eigenständige Mitwirkung an Remote-Projekten.
- Analytische und problemlösungsorientierte Denkweise mit proaktivem Ansatz bei der Lösung von Evaluierungsherausforderungen.
Wünschenswerte Qualifikationen:
- Nachgewiesene Erfahrung mit KI-Modelltraining, RLHF, Daten-Labeling oder ähnlichen datenzentrierten Evaluierungsprojekten.
- Vertrautheit mit KI-Produkten und -Tools, einschließlich Prompt Engineering und Verständnis des Verhaltens und der Grenzen von Modellen.
- Erfahrung im Verfassen von Bewertungsrastern, im Bewerten von Modellausgaben oder in der Prüfung von KI-Antworten auf Genauigkeit, Nützlichkeit und Sicherheit.
- Hintergrund in KI-Training, Datenaufbereitung für maschinelles Lernen oder LLM-orientierten Projekten (stark bevorzugt).