Teamleitung Sozialwissenschaften & Bildung

In dieser stundenweisen Remote-Auftragnehmerrolle arbeiten Sie als Quality Assurance Lead (QAL) für Sozialwissenschaften & Bildung und überwachen Qualität, Konsistenz und Trainerleistung in KI-Trainingsprojekten mit Schwerpunkt auf Sozialwissenschaften, Bildung und Lernen. Sie prüfen KI-generierte sozialwissenschaftliche/bildungsbezogene Inhalte sowie die Arbeit von Trainern/QAs, bewerten die Ausgabequalität anhand von Projektrichtlinien, geben präzises schriftliches Feedback und stellen sicher, dass alle Mitwirkenden die erwarteten Qualitätsstandards einhalten.

Sie bewerten Arbeiten hinsichtlich konzeptioneller Genauigkeit, Forschungskompetenz, bildungsbezogener Angemessenheit, sozialem Kontext, methodischer Qualität, ethischem Bewusstsein, Sensibilität für Bias, Klarheit, Formatierung, Befolgung von Anweisungen und Einhaltung projektspezifischer Rubriken. Sie erkennen wiederkehrende Qualitätsprobleme, kommunizieren Aktualisierungen an Trainer und QAs, unterstützen das Onboarding, pflegen die Dokumentation und helfen dabei, Mitwirkende zu aktivieren, die nicht kontinuierlich arbeiten. Diese Rolle erfordert fundierte Fachkenntnisse in Sozialwissenschaften und/oder Bildung, starke Englischkenntnisse in der Kommunikation, ausgezeichnete Detailgenauigkeit, strukturierte Kommunikation und die Fähigkeit, Qualitätsworkflows über remote arbeitende Expertenteams hinweg zu steuern.

Diese Rolle ist bei SME Careers angesiedelt, einem schnell wachsenden Unternehmen für KI-Datendienste und Tochtergesellschaft von SuperAnnotate, das Trainingsdaten für viele der weltweit größten KI-Unternehmen und Foundation-Model-Labs bereitstellt. Ihre Qualitätsführung in Sozialwissenschaften und Bildung trägt direkt dazu bei, die weltweit führenden KI-Modelle zu verbessern, indem Sie sicherstellen, dass sozialwissenschaftliche und bildungsbezogene Trainingsdaten präzise, differenziert, forschungsbasiert, ethisch bewusst und mit den Kundenerwartungen abgestimmt sind.

Was Sie tun werden

• Qualitätsüberwachung: Stichprobenprüfung sozialwissenschaftlicher und bildungsbezogener Items, Identifizierung von Qualitätsproblemen, laufendes Feedback über DMs und Eskalation wiederkehrender oder kritischer Probleme.
• Prüfung sozialwissenschaftlicher und bildungsbezogener Inhalte: Bewertung KI-generierter Erklärungen, Unterrichtsinhalte, sozialwissenschaftlicher Zusammenfassungen, Inhalte zu Forschungsmethoden, Bildungsaktivitäten, Bewertungsitems, Lernguidance und sozialer Argumentation hinsichtlich Genauigkeit und Differenziertheit.
• Kommunikation mit Trainern und QAs: Aktualisierung von Trainern und QAs auf Discord zu neuen Item-Richtlinien, Projektänderungen, Workflow-Aktualisierungen, Qualitätserwartungen und sozialwissenschafts-/bildungsspezifischen Prüfstandards.
• Bearbeitung von Fragen: Klare und zeitnahe Beantwortung von Fragen von Trainern/QAs, insbesondere zu Bildungskonzepten, Lernzielen, Forschungsmethoden, sozialem Kontext, Bias, Angemessenheit für Lernende und Rubrikinterpretation.
• Aktivierungsmanagement für Trainer/QAs: DMs an inaktive oder nicht arbeitende Mitwirkende, Ermutigung zur Aktivierung, Nachverfolgung von Follow-ups und Kennzeichnung von Verfügbarkeitsproblemen bei Bedarf.
• Dokumentation: Erstellung und Pflege sozialwissenschaftlicher/bildungsbezogener Projektdokumentation, einschließlich Style Guides, Trackern, FAQs, Qualitätshinweisen, Beispielen, Honeypots, Kalibrierungsaufgaben und Onboarding-Materialien.
• Onboarding und Schulung: Planung und Durchführung von Onboarding-/Schulungsgesprächen mit Trainern und QAs zur Erläuterung von Projekt Erwartungen, Workflows, Rubriken, Qualitätsstandards und sozialwissenschafts-/bildungsspezifischen Anforderungen.
• Qualitätsausrichtung: Sicherstellung, dass alle Trainer und QAs die Prüfrichtlinien für Sozialwissenschaften und Bildung konsistent anwenden und Aktualisierungen im Zuge der Projektentwicklung verstehen.
• Bias- und Ethikprüfung: Kennzeichnung von Stereotypisierung, stigmatisierender Sprache, unbelegten Aussagen über Gruppen, schwacher kausaler Argumentation, mangelhaftem pädagogischem Scaffolding oder ethisch problematischen Inhalten.
• Prozessverbesserung: Identifizierung wiederkehrender Qualitätslücken, Vorschläge zur Workflow-Verbesserung und Unterstützung beim Aufbau skalierbarer QA-Prozesse für KI-Trainingsprojekte in Sozialwissenschaften und Bildung.

Was wir suchen

• Bachelor-, Master-, PhD-Abschluss, Lehrbefähigung oder gleichwertige Berufserfahrung in Bildung, Soziologie, Psychologie, Anthropologie, Politikwissenschaft, Sozialarbeit, öffentlicher Politik, Pädagogischer Psychologie, Curriculumstudien oder einem verwandten Bereich.
• Fundierte Englischkenntnisse, um Projektrichtlinien zu befolgen, mit Teams zu kommunizieren und klares schriftliches Feedback zu geben.
• 3+ Jahre Erfahrung in Lehre, Curriculumentwicklung, sozialwissenschaftlicher Forschung, Prüfung von Bildungsinhalten, Instructional Design, akademischem Schreiben, Sozialpolitik, Schülerbewertung oder verwandten Prüfworkflows.
• Fundiertes Verständnis sozialwissenschaftlicher Konzepte, Bildungstheorie, Pädagogik, Lernergebnissen, Bewertungsdesign, Forschungsmethoden, Ethik, Bias, Kultur, sozialen Institutionen, Ungleichheit und evidenzbasierter Argumentation.
• Fähigkeit, sozialwissenschaftliche/bildungsbezogene Inhalte anhand detaillierter Rubriken zu bewerten und Probleme wie unbelegte Verallgemeinerungen, Stereotypisierung, schwache Kausalaussagen, mangelhaftes instruktionales Design, voreingenommenes Framing, fehlerhafte Methodik oder altersunangemessene Bildungsinhalte zu identifizieren.
• Vertrautheit mit Bereichen wie Unterrichtslernen, Bewertung, Unterrichtsplanung, Sozialforschung, qualitativen/quantitativen Methoden, Bildungsgerechtigkeit, kindlicher Entwicklung, Lernwissenschaft oder Curriculumsstandards ist von Vorteil.
• Erfahrung in der Leitung oder Unterstützung remote arbeitender Teams von Lehrkräften, Forschern, Curriculum-Autoren, Prüfern, Annotatoren, Trainern oder QAs ist stark von Vorteil.
• Komfortables Arbeiten in schnelllebigen Remote-Umgebungen mit Tools wie Discord, Google Sheets, Google Docs, Trackern, Dashboards und Projektmanagementsystemen.
• Hohe Detailgenauigkeit und Organisation, mit der Fähigkeit, Style Guides, FAQs, Tracker, Onboarding-Materialien, Honeypots, Kalibrierungsaufgaben und Dokumentation zu pflegen.
• Erfahrung mit KI-Training, Datenannotation, LLM-Evaluierung, QA in Sozialwissenschaften, Bildungs-QA, Curriculumprüfung oder rubrikbasierter Prüfung ist ein starkes Plus.