Qualitätssicherungs-Leitung Soziologie (QAL)

In dieser stundenweisen Remote-Auftragnehmerrolle arbeiten Sie als Qualitätssicherungs-Leitung Soziologie (QAL) und überwachen Qualität, Konsistenz und Trainerleistung in soziologisch ausgerichteten KI-Trainingsprojekten. Sie prüfen KI-generierte soziologische Inhalte sowie Trainer-/QA-Arbeit, bewerten die Ausgabequalität anhand von Projektrichtlinien, geben präzises schriftliches Feedback und stellen sicher, dass alle Mitwirkenden die erwarteten Qualitätsstandards einhalten.

Sie bewerten Arbeiten hinsichtlich soziologischer Genauigkeit, Theorienanwendung, Forschungskompetenz, sozialem Kontext, methodischer Strenge, ethischem Bewusstsein, Bias-Sensibilität, Klarheit, Formatierung, Befolgung von Anweisungen und Einhaltung projektspezifischer Rubriken. Sie erkennen wiederkehrende Qualitätsprobleme, kommunizieren Updates an Trainer und QAs, unterstützen das Onboarding, pflegen Dokumentation und helfen dabei, Mitwirkende zu aktivieren, die nicht kontinuierlich arbeiten. Diese Rolle erfordert starke soziologische Fachkenntnis, starke Englischkommunikationsfähigkeiten, ausgezeichnete Detailgenauigkeit, strukturierte Kommunikation und die Fähigkeit, Qualitätsworkflows über remote arbeitende Expertenteams hinweg zu managen.

Diese Rolle ist bei SME Careers, einem schnell wachsenden AI-Data-Services-Unternehmen und Tochterunternehmen von SuperAnnotate, das Trainingsdaten für viele der weltweit größten KI-Unternehmen und Foundation-Model-Labs bereitstellt. Ihre soziologische Qualitätsführung trägt direkt dazu bei, die weltweit führenden KI-Modelle zu verbessern, indem Sie sicherstellen, dass soziologische Trainingsdaten genau, nuanciert, ethisch bewusst, forschungsbasiert und an den Erwartungen der Kunden ausgerichtet sind.

Der Auswahlprozess umfasst ein KI-Interview, eine domänenspezifische Aufgabe und ein Interview mit einem Recruiter.

Wichtig: Für diese Rolle gibt es derzeit kein unmittelbares Projekt; falls Sie jedoch qualifiziert sind, gehören Sie zu den ersten Expertinnen und Experten, die wir kontaktieren, wenn sich relevante Möglichkeiten ergeben. Dies verschafft Ihnen außerdem Zugang zu zukünftigen Projekten, die über unser Expertennetzwerk verfügbar sind.

Was Sie tun werden

• Qualitätsüberwachung: Stichprobenartige Prüfung soziologischer Items, Identifizierung von Qualitätsproblemen, kontinuierliches Feedback über DMs und Eskalation wiederkehrender oder kritischer Probleme.
• Soziologische Prüfung: Bewertung KI-generierter soziologischer Erklärungen, Theorienanwendungen, Forschungszusammenfassungen, sozialpolitischer Diskussionen, demografischer Interpretationen und Argumentationen auf Genauigkeit und Nuance.
• Kommunikation mit Trainern und QAs: Updates für Trainer und QAs auf Discord zu neuen Item-Richtlinien, Projektänderungen, Workflow-Updates, Qualitätserwartungen und soziologiespezifischen Prüfstandards.
• Fragenbearbeitung: Klare und zeitnahe Beantwortung von Fragen der Trainer/QAs, insbesondere zu soziologischen Konzepten, Sozialtheorie, Forschungsmethoden, Ungleichheit, Kultur, Ethik, Bias und Rubrikenauslegung.
• Aktivierungsmanagement für Trainer/QAs: DMs an inaktive oder nicht arbeitende Mitwirkende, Ermutigung zur Aktivierung, Nachverfolgung von Follow-ups und Kennzeichnung von Verfügbarkeitsproblemen bei Bedarf.
• Dokumentation: Erstellung und Pflege soziologischer Projektdokumentation, einschließlich Style Guides, Trackern, FAQs, Qualitätsnotizen, Beispielen, Honeypots, Kalibrierungsaufgaben und Onboarding-Materialien.
• Onboarding und Schulung: Planung und Durchführung von Onboarding-/Schulungsgesprächen mit Trainern und QAs zur Erläuterung von Projekt Erwartungen, Workflows, Rubriken, Qualitätsstandards und soziologiespezifischen Prüfanforderungen.
• Qualitätsausrichtung: Sicherstellung, dass alle Trainer und QAs soziologische Prüfrichtlinien konsistent anwenden und Updates verstehen, während sich Projekte weiterentwickeln.
• Bias- und Ethikprüfung: Kennzeichnung von Stereotypisierung, stigmatisierender Sprache, unbelegten Behauptungen über soziale Gruppen, schwacher kausaler Argumentation oder ethisch problematischer sozialer Analyse.
• Prozessverbesserung: Identifizierung wiederkehrender Qualitätslücken, Vorschlag von Workflow-Verbesserungen und Unterstützung beim Aufbau skalierbarer QA-Prozesse für soziologische KI-Trainingsprojekte.

Was wir suchen

• Bachelor-, Master- oder PhD-Abschluss in Soziologie, Sozialwissenschaften, Sozialforschung, Demografie, Kriminologie, Geschlechterforschung, Ethnic Studies, Public Policy, Anthropologie oder einem eng verwandten Fachgebiet.
• Starkes Verständnis der englischen Sprache, um Projektrichtlinien zu befolgen, mit Teams zu kommunizieren und klares schriftliches Feedback zu geben.
• 3+ Jahre Erfahrung in soziologischer Forschung, Lehre, Sozialpolitikanalyse, qualitativer/quantitativer Forschung, akademischem Schreiben, sozialwissenschaftlicher Prüfung, Gemeinschaftsforschung oder verwandten Workflows.
• Starkes Verständnis soziologischer Theorie, sozialer Institutionen, Ungleichheit, Stratifizierung, Rasse/Ethnizität, Geschlecht, Klasse, Kultur, Devianz, Organisationen, sozialem Wandel, Demografie und Forschungsmethoden.
• Fähigkeit, soziologische Inhalte anhand detaillierter Rubriken zu bewerten und Probleme wie unbelegte Verallgemeinerungen, Stereotypisierung, methodische Mängel, schwache Kausalbehauptungen, Übervereinfachung, verzerrte Framing oder ungenaue Verwendung soziologischer Konzepte zu identifizieren.
• Vertrautheit mit Bereichen wie Umfrageforschung, Interviews, Ethnografie, statistischer Analyse, Sozialpolitik, Stadtsoziologie, Familiensoziologie, Bildung, gesundheitlichen Ungleichheiten, Arbeit/Organisationen oder Kriminologie ist von Vorteil.
• Erfahrung in der Leitung oder Unterstützung remote arbeitender Teams von Forschenden, Lehrkräften, Analysten, Prüfern, Annotatoren oder QAs ist stark von Vorteil.
• Komfortables Arbeiten in schnelllebigen Remote-Umgebungen mit Tools wie Discord, Google Sheets, Google Docs, Trackern, Dashboards und Projektmanagementsystemen.
• Hochgradig detailorientiert und organisiert, mit der Fähigkeit, Style Guides, FAQs, Tracker, Onboarding-Materialien, Kalibrierungsaufgaben und Dokumentation zu pflegen.
• Erfahrung mit KI-Training, Datenannotation, LLM-Bewertung, sozialwissenschaftlicher QA, akademischer Prüfung oder rubrikenbasierter Prüfung ist ein starkes Plus.