Lead für Qualitätssicherung in Politikwissenschaft (QAL)

In dieser stundenweisen Remote-Auftragnehmerrolle arbeiten Sie als Lead für Qualitätssicherung in Politikwissenschaft (QAL) und überwachen Qualität, Konsistenz und Trainerleistung in KI-Trainingsprojekten zur Politikwissenschaft. Sie prüfen KI-generierte politikwissenschaftliche Inhalte sowie Trainer-/QA-Arbeit, bewerten die Ausgabequalität anhand von Projektrichtlinien, geben präzises schriftliches Feedback und stellen sicher, dass alle Mitwirkenden die erwarteten Qualitätsstandards einhalten.

Sie bewerten Arbeit hinsichtlich konzeptioneller Genauigkeit, institutionellen Kenntnissen, vergleichendem Kontext, Genauigkeit politischer Theorie, politikbezogener Argumentation, Quellenbewusstsein, Sensibilität für Verzerrungen, Klarheit, Formatierung, Befolgung von Anweisungen und Einhaltung projektspezifischer Bewertungsraster. Sie erkennen wiederkehrende Qualitätsprobleme, kommunizieren Aktualisierungen an Trainer und QAs, unterstützen das Onboarding, pflegen Dokumentation und helfen dabei, Mitwirkende zu aktivieren, die nicht kontinuierlich arbeiten. Diese Rolle erfordert fundierte politikwissenschaftliche Expertise, starke Englischkenntnisse in der Kommunikation, ausgezeichnete Detailgenauigkeit, strukturierte Kommunikation und die Fähigkeit, Qualitätsworkflows über remote arbeitende Expertenteams hinweg zu steuern.

Diese Rolle ist bei SME Careers angesiedelt, einem schnell wachsenden Unternehmen für KI-Datendienste und Tochterunternehmen von SuperAnnotate, das Trainingsdaten für viele der weltweit größten KI-Unternehmen und Foundation-Model-Labs bereitstellt. Ihre Qualitätsführung im Bereich Politikwissenschaft trägt direkt dazu bei, die weltweit führenden KI-Modelle zu verbessern, indem sichergestellt wird, dass politikwissenschaftliche Trainingsdaten korrekt, ausgewogen, gut kontextualisiert, analytisch fundiert und mit den Erwartungen der Kunden abgestimmt sind.

Der Auswahlprozess umfasst ein KI-Interview, eine domänenspezifische Aufgabe und ein Interview mit einem Recruiter.

Wichtig: Für diese Rolle gibt es derzeit kein unmittelbares Projekt; wenn Sie jedoch qualifiziert sind, gehören Sie zu den ersten Expertinnen und Experten, die wir kontaktieren, sobald sich relevante Möglichkeiten ergeben. Dies verschafft Ihnen außerdem Zugang zu zukünftigen Projekten, die über unser Expertennetzwerk verfügbar sind.

Was Sie tun werden

• Qualitätsüberwachung: Stichprobenartige Prüfung politikwissenschaftlicher Items, Identifizierung von Qualitätsproblemen, laufendes Feedback über DMs und Eskalation wiederkehrender oder kritischer Probleme.
• Politikwissenschaftliche Prüfung: Bewertung KI-generierter politikwissenschaftlicher Erklärungen, vergleichender Analysen, politischer Zusammenfassungen, Diskussionen zur politischen Theorie, institutioneller Beschreibungen und Argumentationen auf Genauigkeit und Ausgewogenheit.
• Kommunikation mit Trainern und QAs: Aktualisierung von Trainern und QAs auf Discord zu neuen Item-Richtlinien, Projektänderungen, Workflow-Aktualisierungen, Qualitätserwartungen und politikwissenschaftsspezifischen Prüfstandards.
• Bearbeitung von Fragen: Klare und zeitnahe Beantwortung von Fragen von Trainern/QAs, insbesondere zu Institutionen, vergleichender Politikwissenschaft, öffentlicher Politik, politischer Theorie, internationalen Beziehungen, Verzerrungen und Auslegung von Bewertungsrastern.
• Verwaltung der Aktivierung von Trainern/QAs: Direktnachrichten an inaktive oder nicht arbeitende Mitwirkende, Ermutigung zur Aktivierung, Nachverfolgung von Follow-ups und Kennzeichnung von Verfügbarkeitsproblemen bei Bedarf.
• Dokumentation: Erstellung und Pflege politikwissenschaftlicher Projektdokumentation, einschließlich Style Guides, Trackern, FAQs, Qualitätsnotizen, Beispielen, Honeypots, Kalibrierungsaufgaben und Onboarding-Materialien.
• Onboarding und Schulung: Planung und Durchführung von Onboarding-/Schulungsgesprächen mit Trainern und QAs, um Projektanforderungen, Workflows, Bewertungsraster, Qualitätsstandards und politikwissenschaftsspezifische Prüfanforderungen zu erläutern.
• Qualitätsausrichtung: Sicherstellung, dass alle Trainer und QAs die politikwissenschaftlichen Prüfrichtlinien konsistent anwenden und Aktualisierungen im Zuge der Projektentwicklung verstehen.
• Prüfung von Verzerrungen und Risiken: Kennzeichnung irreführender, ideologisch einseitiger, unbelegter, veralteter, politisch aufhetzender oder schlecht kontextualisierter Behauptungen.
• Prozessverbesserung: Identifizierung wiederkehrender Qualitätslücken, Vorschläge zurWorkflow-Verbesserung und Unterstützung beim Aufbau skalierbarer QA-Prozesse für KI-Trainingsprojekte in der Politikwissenschaft.

Was wir suchen

• Bachelor-, Master- oder PhD-Abschluss in Politikwissenschaft, internationalen Beziehungen, öffentlicher Politik, Regierungslehre, politischer Theorie, Sicherheitsstudien, Rechtswissenschaft, Soziologie, Wirtschaftswissenschaft oder einem eng verwandten sozialwissenschaftlichen Fach.
• Fundierte Englischkenntnisse, um Projektrichtlinien zu befolgen, mit Teams zu kommunizieren und klares schriftliches Feedback zu geben.
• 3+ Jahre Erfahrung in politikwissenschaftlicher Forschung, Lehre, Politikberatung, öffentlichen Angelegenheiten, internationalen Beziehungen, politischem Schreiben, akademischer Begutachtung oder verwandten analytischen Workflows.
• Fundiertes Verständnis politischer Institutionen, vergleichender Politikwissenschaft, internationaler Beziehungen, öffentlicher Politik, politischer Theorie, Wahlsysteme, Governance, Staatlichkeit, Zivilgesellschaft und politischen Verhaltens.
• Fähigkeit, politikwissenschaftliche Inhalte anhand detaillierter Bewertungsraster zu bewerten und Probleme wie Übervereinfachung, ideologische Verzerrung, unbelegte Behauptungen, fehlerhafte institutionelle Beschreibungen, irreführende Kausalargumentation oder schwache vergleichende Analysen zu erkennen.
• Vertrautheit mit Bereichen wie Demokratie und Autoritarismus, politische Ökonomie, öffentliche Verwaltung, konstitutionelle Systeme, Wahlpolitik, Konfliktforschung, internationale Organisationen, Politikfolgenabschätzung oder Umfrageforschung ist von Vorteil.
• Erfahrung in der Leitung oder Unterstützung remote arbeitender Teams von Analysten, Forschern, Prüfern, Lehrkräften, Annotatoren oder QAs ist stark von Vorteil.
• Komfortables Arbeiten in schnelllebigen Remote-Umgebungen mit Tools wie Discord, Google Sheets, Google Docs, Trackern, Dashboards und Projektmanagementsystemen.
• Hohe Detailgenauigkeit und Organisation, mit der Fähigkeit, Style Guides, FAQs, Tracker, Onboarding-Materialien, Kalibrierungsaufgaben und Dokumentation zu pflegen.
• Erfahrung mit KI-Training, Datenannotation, LLM-Evaluierung, Policy-QA, akademischer Begutachtung, Fact-Checking oder rasterbasierter Prüfung ist ein starkes Plus.