Leiter der Qualitätssicherung für Psychologie (QAL)

In dieser stundenweisen Remote-Auftragnehmerrolle arbeiten Sie als Leiter der Qualitätssicherung für Psychologie (QAL) und überwachen Qualität, Konsistenz und Trainerleistung in psychologisch ausgerichteten KI-Trainingsprojekten. Sie prüfen KI-generierte psychologische Inhalte und die Arbeit von Trainern/QAs, bewerten die Ausgabequalität anhand von Projektrichtlinien, geben präzises schriftliches Feedback und stellen sicher, dass alle Mitwirkenden die erwarteten Qualitätsstandards einhalten.

Sie bewerten Arbeiten hinsichtlich psychologischer Genauigkeit, Theorienanwendung, Forschungskompetenz, ethischer Sensibilität, Sicherheit im Bereich psychischer Gesundheit, diagnostischer Vorsicht, Klarheit, Formatierung, Befolgung von Anweisungen und Einhaltung projektspezifischer Rubriken. Sie erkennen wiederkehrende Qualitätsprobleme, kommunizieren Updates an Trainer und QAs, unterstützen das Onboarding, pflegen Dokumentationen und helfen dabei, Mitwirkende zu aktivieren, die nicht konsistent arbeiten. Diese Rolle erfordert fundierte psychologische Expertise, starke Englischkenntnisse in der Kommunikation, ausgezeichnete Detailgenauigkeit, strukturierte Kommunikation und die Fähigkeit, Qualitätsworkflows über remote arbeitende Expertenteams hinweg zu steuern.

Diese Rolle ist bei SME Careers angesiedelt, einem schnell wachsenden Unternehmen für KI-Datendienste und einer Tochtergesellschaft von SuperAnnotate, das Trainingsdaten für viele der weltweit größten KI-Unternehmen und Foundation-Model-Labs bereitstellt. Ihre Qualitätsführung im Bereich Psychologie trägt direkt dazu bei, die führenden KI-Modelle der Welt zu verbessern, indem Sie sicherstellen, dass psychologische Trainingsdaten korrekt, ethisch, angemessen vorsichtig, forschungsbasiert und mit den Erwartungen der Kunden abgestimmt sind.

Der Auswahlprozess umfasst ein KI-Interview, eine domänenspezifische Aufgabe und ein Interview mit einem Recruiter.

Wichtig: Für diese Rolle gibt es derzeit kein unmittelbares Projekt; wenn Sie jedoch qualifiziert sind, gehören Sie zu den ersten Expertinnen und Experten, die wir kontaktieren, sobald sich relevante Möglichkeiten ergeben. Dies bietet Ihnen außerdem Zugang zu zukünftigen Projekten, die über unser Expertennetzwerk verfügbar sind.

Was Sie tun werden

• Qualitätsüberwachung: Stichprobenartige Prüfung psychologischer Aufgaben, Identifizierung von Qualitätsproblemen, kontinuierliches Feedback über DMs und Eskalation wiederkehrender oder kritischer Probleme.
• Psychologische Prüfung: Bewertung KI-generierter psychologischer Erklärungen, Inhalte zur psychischen Gesundheit, Forschungszusammenfassungen, Verhaltensempfehlungen, Theorienanwendungen und sicherheitssensibler Antworten auf Genauigkeit und Angemessenheit.
• Kommunikation mit Trainern und QAs: Information von Trainern und QAs auf Discord über neue Aufgabenrichtlinien, Projektänderungen, Workflow-Updates, Qualitätserwartungen und psychologiespezifische Prüfstandards.
• Beantwortung von Fragen: Klare und zeitnahe Beantwortung von Fragen der Trainer/QAs, insbesondere zu psychologischen Konzepten, Evidenzqualität, ethischen Grenzen, Sicherheit im Bereich psychischer Gesundheit, diagnostischer Vorsicht und Rubrikeninterpretation.
• Steuerung der Aktivierung von Trainern/QAs: DMs an inaktive oder nicht arbeitende Mitwirkende, Förderung der Aktivierung, Nachverfolgung von Follow-ups und Kennzeichnung von Verfügbarkeitsproblemen bei Bedarf.
• Dokumentation: Erstellung und Pflege psychologischer Projektdokumentationen, einschließlich Styleguides, Trackern, FAQs, Qualitätsnotizen, Beispielen, Honeypots, Kalibrierungsaufgaben und Onboarding-Materialien.
• Onboarding und Schulung: Planung und Durchführung von Onboarding-/Schulungsgesprächen mit Trainern und QAs zur Erläuterung von ProjektErwartungen, Workflows, Rubriken, Qualitätsstandards und psychologiespezifischen Prüfanforderungen.
• Qualitätsausrichtung: Sicherstellung, dass alle Trainer und QAs psychologische Prüfrichtlinien konsistent anwenden und Updates im Zuge der Projektentwicklung verstehen.
• Sicherheits- und Ethikprüfung: Kennzeichnung unsicherer, übermäßig selbstsicherer, stigmatisierender, pseudowissenschaftlicher, diagnostisch unangemessener oder krisenunsensibler psychologischer Inhalte.
• Prozessverbesserung: Identifizierung wiederkehrender Qualitätslücken, Vorschlag von Workflow-Verbesserungen und Unterstützung beim Aufbau skalierbarer QA-Prozesse für psychologische KI-Trainingsprojekte.

Was wir suchen

• Bachelor-, Master-, PhD-, PsyD-Abschluss oder gleichwertiger beruflicher Hintergrund in Psychologie, klinischer Psychologie, Beratung, Verhaltenswissenschaft, Kognitionswissenschaft, Neurowissenschaft, Sozialarbeit, psychiatrie-naher Forschung, Pädagogik oder einem eng verwandten Bereich.
• Fundierte Englischkenntnisse, um Projektrichtlinien zu befolgen, mit Teams zu kommunizieren und klares schriftliches Feedback zu geben.
• 3+ Jahre Erfahrung in psychologischer Forschung, klinischen/Beratungsumgebungen, Verhaltenswissenschaft, Lehre, akademischem Schreiben, Prüfung von Inhalten zur psychischen Gesundheit, psychologischer Diagnostik oder verwandten Workflows.
• Fundiertes Verständnis psychologischer Theorien, Forschungsmethoden, kognitiver und sozialer Psychologie, Entwicklungspsychologie, abnormer Psychologie, Ethik, evidenzbasierter Praxis und Sicherheitsaspekten im Bereich psychischer Gesundheit.
• Fähigkeit, psychologische Inhalte anhand detaillierter Rubriken zu bewerten und Probleme wie Überdiagnose, unsichere Ratschläge, unbelegte Behauptungen, fehlerhafte Studieninterpretation, Pseudowissenschaft, stigmatisierende Sprache oder unangemessene therapeutische Empfehlungen zu erkennen.
• Vertrautheit mit Bereichen wie CBT, Entwicklungspsychologie, Persönlichkeit, traumainformierter Kommunikation, Verhaltensinterventionen, Gesundheitskompetenz im Bereich psychischer Gesundheit, Forschungsdesign, Statistik und ethischen Richtlinien ist von Vorteil.
• Erfahrung in der Leitung oder Unterstützung remote arbeitender Teams von Forschenden, Klinikern, Pädagogen, Prüfern, Annotatoren oder QAs ist stark von Vorteil.
• Komfortable Arbeit in schnelllebigen Remote-Umgebungen mit Tools wie Discord, Google Sheets, Google Docs, Trackern, Dashboards und Projektmanagementsystemen.
• Hohe Detailgenauigkeit und Organisation, mit der Fähigkeit, Styleguides, FAQs, Tracker, Onboarding-Materialien, Kalibrierungsaufgaben und Dokumentationen zu pflegen.
• Erfahrung mit KI-Training, Datenannotation, LLM-Evaluierung, Psychologie-QA, Prüfung von Inhalten zur psychischen Gesundheit oder rubrikenbasierter Prüfung ist ein starkes Plus.