Domain Contributor - Evaluierungsspezialist/-in

Rollenbezeichnung: Domain Contributor - Evaluierungsspezialist/-in

Art der Rolle: Freiberuflich (ca. 15 Std./Woche)

Standort: Remote

micro1 beauftragt Domain Contributors - Evaluierungsspezialistinnen und -spezialisten, die ein internes Projekt zur Evaluierung und Verbesserung fortschrittlicher KI-Modelle unterstützen. In dieser Rolle setzen Sie Ihre Expertise ein, um KI-Systeme der nächsten Generation zu trainieren. Ihre Arbeit prägt, wie Modelle lernen, schlussfolgern und Leistung erbringen – durch hochwertigen, praxisnahen Input. Flexible Arbeit mit Bezahlung pro Aufgabe in den Bereichen Geschichte, Recht, Finanzen, Journalismus und Technologie, für Expertinnen und Experten mit vorheriger Erfahrung im KI-Training.

Arbeitsumfang

• Entwerfen Sie nuancierte, fachspezifische Aufgaben, die die Grenzen von KI-Modellen ausloten und Denkfehler sichtbar machen.
• Verfassen Sie Fragen und Szenarien, die tiefes Fachwissen über das allgemeine Verständnis hinaus erfordern.
• Bewerten Sie KI-generierte Ausgaben und validieren Sie deren Genauigkeit anhand maßgeblicher Primärquellen aus Ihrem Fachgebiet.
• Dokumentieren Sie klare Begründungen für Schwächen des Modells und benennen Sie dabei übersehene Argumentation, Quellenfehler oder Nuancen.
• Wenden Sie detaillierte Aufgabenrichtlinien und Bewertungsraster (Rubrics) konsequent auf jede Einreichung an.
• Reichen Sie fertige Arbeitsergebnisse eigenständig fortlaufend ein und erfüllen Sie dabei die Projektanforderungen an schriftliche und mündliche Klarheit.

Wünschenswerte Qualifikationen

• Nachgewiesene praktische Erfahrung mit KI-Modelltraining, Annotation, RLHF oder Evaluierung.
• Tiefgehende Expertise in einem Kernbereich: Geschichte, Archiv- oder Bibliothekswissenschaft, Recht (Paralegal, juristische Wissenschaft, Compliance), Finanzen (Aktienresearch, PE/VC, forensische Buchhaltung), Journalismus oder Technologie-/Industriegeschichte.
• Fortgeschrittene Recherchefähigkeiten mit nachgewiesener Erfahrung darin, komplexe Behauptungen anhand maßgeblicher Quellen zu verifizieren.
• Außergewöhnliche schriftliche und mündliche Kommunikationsfähigkeiten, um Ergebnisse und Feedback zu artikulieren.
• Nachgewiesene Fähigkeit, detaillierten Anweisungen und Bewertungsrahmen präzise zu folgen.
• Ein Hintergrund im adversarialen Aufgabendesign oder im Aufgabendesign nach dem Motto „Stomp the Model“ ist von Vorteil.
• Forschung auf Graduiertenniveau, Erfahrung bei einem Fortune-100-Unternehmen oder berufliche Sprachbeherrschung einer nicht englischen Sprache sind ein Plus.

Vergütungsstruktur

Die Vergütung richtet sich nach dem Ergebnis; Expertinnen und Experten werden pro Aufgabe bezahlt, die die Projektvorgaben erfüllt. Der Zeitaufwand für die Arbeit kann je nach Erfahrung und Arbeitsweise der Expertin bzw. des Experten variieren. Es gelten Mindestanforderungen an die Einreichungen. Expertinnen und Experten müssen pro Woche eine Mindestanzahl an Aufgaben einreichen.

Startzeitplan & Verfügbarkeit

Wir besetzen Rollen in der Regel innerhalb von 48 Stunden und suchen Expertinnen und Experten, die sofort einsteigen können. Bei Auswahl erwarten wir, dass Sie Ihre ersten Aufgaben innerhalb von 24–48 Stunden nach Abschluss des Onboardings beginnen.