Leiter Qualitätssicherung Neurowissenschaften (QAL)

In dieser stundenweisen Remote-Auftragnehmerrolle arbeiten Sie als Leiter Qualitätssicherung Neurowissenschaften / Kognitionswissenschaft (QAL) und überwachen Qualität, Konsistenz und Trainerleistung in KI-Trainingsprojekten für Neurowissenschaften und Kognitionswissenschaft. Sie prüfen KI-generierte neurowissenschaftliche/kognitionswissenschaftliche Inhalte sowie Trainer-/QA-Arbeit, bewerten die Ausgabequalität anhand von Projektrichtlinien, geben präzises schriftliches Feedback und stellen sicher, dass alle Mitwirkenden die erwarteten Qualitätsstandards einhalten.

Sie bewerten Arbeiten hinsichtlich wissenschaftlicher Genauigkeit, konzeptueller Präzision, Forschungskompetenz, Verständnis experimenteller Methoden, Argumentation zu Gehirn-Verhalten-Zusammenhängen, statistischer Vorsicht, ethischem Bewusstsein, Klarheit, Formatierung, Befolgung von Anweisungen und Einhaltung projektspezifischer Rubriken. Sie erkennen wiederkehrende Qualitätsprobleme, kommunizieren Aktualisierungen an Trainer und QAs, unterstützen das Onboarding, pflegen Dokumentation und helfen dabei, Mitwirkende zu aktivieren, die nicht kontinuierlich arbeiten. Diese Rolle erfordert fundierte neurowissenschaftliche/kognitionswissenschaftliche Expertise, starke Englischkenntnisse in der Kommunikation, ausgezeichnete Detailgenauigkeit, strukturierte Kommunikation und die Fähigkeit, Qualitätsworkflows über remote arbeitende Expertenteams hinweg zu steuern.

Diese Rolle ist bei SME Careers angesiedelt, einem schnell wachsenden Unternehmen für KI-Datendienste und Tochterunternehmen von SuperAnnotate, das Trainingsdaten für viele der weltweit größten KI-Unternehmen und Foundation-Model-Labs bereitstellt. Ihre Qualitätsführung in Neurowissenschaften/Kognitionswissenschaft trägt direkt zur Verbesserung der weltweit führenden KI-Modelle bei, indem Sie sicherstellen, dass wissenschaftliche Trainingsdaten korrekt, evidenzbewusst, ethisch angemessen, klar erklärt und mit den Erwartungen der Kunden abgestimmt sind.

Der Auswahlprozess umfasst ein KI-Interview, eine domänenspezifische Aufgabe und ein Interview mit einem Recruiter.

Wichtig: Für diese Rolle gibt es derzeit kein unmittelbares Projekt; falls Sie jedoch qualifiziert sind, gehören Sie zu den ersten Expertinnen und Experten, die wir kontaktieren, wenn sich relevante Möglichkeiten ergeben. Dies verschafft Ihnen außerdem Zugang zu zukünftigen Projekten, die über unser Expertennetzwerk verfügbar sind.

Was Sie tun werden

• Qualitätsüberwachung: Stichprobenprüfung neurowissenschaftlicher/kognitionswissenschaftlicher Items, Erkennen von Qualitätsproblemen, laufendes Feedback über DMs und Eskalieren wiederkehrender oder kritischer Probleme.
• Wissenschaftliche Prüfung: Bewertung KI-generierter neurowissenschaftlicher/kognitionswissenschaftlicher Erklärungen, Forschungszusammenfassungen, experimenteller Interpretationen, Aussagen zu Gehirn-Verhalten-Zusammenhängen, Anwendungen kognitiver Theorien und schrittweiser Argumentationen hinsichtlich Genauigkeit und Klarheit.
• Kommunikation mit Trainern und QAs: Aktualisierung von Trainern und QAs auf Discord zu neuen Item-Richtlinien, Projektänderungen, Workflow-Aktualisierungen, Qualitätserwartungen und neurowissenschafts-/kognitionswissenschaftsspezifischen Prüfstandards.
• Bearbeitung von Fragen: Klare und zeitnahe Beantwortung von Fragen von Trainern/QAs, insbesondere zu neuronalen Mechanismen, Kognition, experimentellem Design, statistischer Interpretation, ethischen Grenzen, klinischer Vorsicht und Rubrikinterpretation.
• Aktivierungsmanagement für Trainer/QAs: DMs an inaktive oder nicht arbeitende Mitwirkende, Ermutigung zur Aktivierung, Nachverfolgung von Follow-ups und Kennzeichnung von Verfügbarkeitsproblemen bei Bedarf.
• Dokumentation: Erstellung und Pflege neurowissenschaftlicher/kognitionswissenschaftlicher Projektdokumentation, einschließlich Style Guides, Trackern, FAQs, Qualitätsnotizen, Beispielen, Honeypots, Kalibrierungsaufgaben und Onboarding-Materialien.
• Onboarding und Schulung: Planung und Durchführung von Onboarding-/Schulungsgesprächen mit Trainern und QAs zur Erläuterung von Projekt Erwartungen, Workflows, Rubriken, Qualitätsstandards und neurowissenschafts-/kognitionswissenschaftsspezifischen Prüfanforderungen.
• Qualitätsausrichtung: Sicherstellen, dass alle Trainer und QAs die neurowissenschaftlichen/kognitionswissenschaftlichen Prüfrichtlinien konsistent anwenden und Aktualisierungen verstehen, während sich Projekte weiterentwickeln.
• Sicherheits- und Ethikprüfung: Kennzeichnung pseudowissenschaftlicher, überzogen selbstsicherer, klinisch irreführender, ethisch problematischer oder unbelegter Aussagen über Gehirn, Kognition, Verhalten oder psychische Gesundheit.
• Prozessverbesserung: Erkennen wiederkehrender Qualitätslücken, Vorschlagen von Workflow-Verbesserungen und Mitwirken am Aufbau skalierbarer QA-Prozesse für KI-Trainingsprojekte in Neurowissenschaften/Kognitionswissenschaft.

Was wir suchen

• Bachelor-, Master-, PhD-, MD/PhD-Abschluss oder gleichwertiger beruflicher Hintergrund in Neurowissenschaften, Kognitionswissenschaft, Psychologie, Neurobiologie, Kognitiver Psychologie, Computational Neuroscience, neurology-naher Forschung, Biologie, biomedizinischen Wissenschaften oder einem eng verwandten Fachgebiet.
• Fundierte Englischkenntnisse, um Projektrichtlinien zu befolgen, mit Teams zu kommunizieren und klares schriftliches Feedback zu geben.
• 3+ Jahre Erfahrung in neurowissenschaftlicher/kognitionswissenschaftlicher Forschung, Lehre, Laborarbeit, akademischer Begutachtung, Wissenschaftskommunikation, experimentellem Design, Datenanalyse oder verwandten wissenschaftlichen Workflows.
• Fundiertes Verständnis neuronaler Systeme, Kognition, Wahrnehmung, Aufmerksamkeit, Gedächtnis, Lernen, Sprache, Entscheidungsfindung, Neuroanatomie, neuronaler Signalübertragung, Forschungsmethoden und Gehirn-Verhalten-Beziehungen.
• Fähigkeit, neurowissenschaftliche/kognitionswissenschaftliche Inhalte anhand detaillierter Rubriken zu bewerten und Probleme wie Neuromythen, Überclaims, unbelegte Kausalschlüsse, fehlerhafte Studieninterpretation, inkorrekte Terminologie, Pseudowissenschaft oder irreführende klinische Implikationen zu erkennen.
• Vertrautheit mit Tools oder Methoden wie EEG, fMRI, Verhaltensexperimenten, Computational Modeling, neuropsychologischer Diagnostik, Statistik, Python/R/MATLAB, kognitiven Aufgaben oder Literaturrecherche ist von Vorteil.
• Erfahrung in der Leitung oder Unterstützung remote arbeitender Teams von Forschenden, Gutachtern, Lehrkräften, Annotatoren, Wissenschaftsautoren oder QAs ist stark von Vorteil.
• Komfortables Arbeiten in schnelllebigen Remote-Umgebungen mit Tools wie Discord, Google Sheets, Google Docs, Trackern, Dashboards und Projektmanagementsystemen.
• Hohe Detailgenauigkeit und Organisationsfähigkeit mit der Fähigkeit, Style Guides, FAQs, Tracker, Onboarding-Materialien, Kalibrierungsaufgaben und Dokumentation zu pflegen.
• Erfahrung mit KI-Training, Datenannotation, LLM-Evaluierung, wissenschaftlicher QA, akademischer Begutachtung, Prüfung psychologischer/neurowissenschaftlicher Inhalte oder rubrikbasierter Prüfung ist ein starkes Plus.