Über die Stelle
Stellenbezeichnung: Fachexperte (SME) für Data Science und Analysemethodik
Vertragsart: Freiberufler (Contractor)
Standort: Remote
micro1 beauftragt Fachexperten (SMEs) für Data Science und Analysemethodik, um Expertise in ein wirkungsvolles Kundenprojekt einzubringen, das sich auf fortgeschrittene Analyse-Pipelines und große Sprachmodelle (LLMs) konzentriert. In dieser Rolle setzen Sie Ihre Expertise ein, um bei der Schulung von KI-Systemen der nächsten Generation zu helfen. Ihre Arbeit prägt durch hochwertigen, praxisnahen Input, wie Modelle lernen, schlussfolgern und arbeiten. Vorerfahrung mit KI ist nicht erforderlich — Ihr Fachwissen ist entscheidend.
Aufgabenbereich
- Ordnen Sie Szenarien der skalierten Analyse und Pipeline-Integration einer etablierten Taxonomie über zentrale Bewertungsbereiche hinweg zu.
- Verfassen Sie detaillierte Analysefälle, die authentische Einsatzmuster widerspiegeln, einschließlich automatisierter Triage, Anreicherung und Analyse im großen Maßstab, sowie repräsentative Fehlermodi in realen Umgebungen.
- Bewerten und benoten Sie Antworten anhand von Kriterien wie dem Umgang mit Quellen, der Argumentation, dem Verständnis von Grenzen und dem praktischen Nutzen.
- Identifizieren und kennzeichnen Sie Fälle von übermäßiger Ablehnung (Over-Refusal) durch das Modell, die legitime Analyse-Workflows behindern oder die Kontinuität der Pipeline stören könnten.
- Dokumentieren Sie anspruchsvolle Grenzfälle und aufkommende methodische Bedenken und geben Sie umsetzbare Empfehlungen für kontinuierliche Verbesserung.
- Liefern Sie klares, aufschlussreiches schriftliches und mündliches Feedback, das iterative, hochwertige Projektergebnisse unterstützt.
Bevorzugte Qualifikationen
- Nachgewiesene Erfahrung in der Integration von LLMs — etwa staatlichen GPT-Varianten — in komplexe Daten- oder Analyse-Pipelines.
- Nachgewiesene Fähigkeit, Analysen im großen Maßstab durchzuführen, mit Verständnis für Fehlermodi der Automatisierung und relevante Bewertungsmetriken.
- Erfahrung in Lehre, Mentoring oder technischer Führung in Data Science oder verwandten Analysedisziplinen.
- Expertise im Verfassen klarer, prägnanter technischer Dokumentation und in der Vermittlung komplexer Konzepte in starkem schriftlichem Englisch.
- Berührung mit dem Entwurf von Evaluierungsrahmen oder Benchmark-Systemen.
- Vertrautheit mit Analysebereichen aus Verteidigung, Nachrichtendienst oder Regierung wird sehr geschätzt.
- Fähigkeit, in verteilten, internationalen Projektumgebungen mit minimalen Beschränkungen durch Sicherheitsfreigaben wirksam zu arbeiten.
Mehr über unsere Arbeit für Regierung und Verteidigung erfahren
Bei micro1 arbeiten wir mit Experten aus Regierung und Verteidigung zusammen, um zu bewerten, wie leistungsfähig fortgeschrittene KI-Modelle bei realen Aufgaben sind.
Unser MissionReport-Benchmark bewertet KI-generierte Militär- und Regierungsberichte und unterstreicht die Bedeutung von Expertenurteil, Genauigkeit und operativem Verständnis.
Mehr erfahren: https://www.micro1.ai/benchmark/mission-report