Lead für Qualitätssicherung in der Wirtschaftswissenschaft (QAL)

In dieser stundenweisen, remote Auftragnehmerrolle arbeiten Sie als Lead für Qualitätssicherung in der Wirtschaftswissenschaft (QAL), um Qualität, Konsistenz und Trainerleistung in wirtschaftswissenschaftlich ausgerichteten KI-Trainingsprojekten zu überwachen. Sie prüfen KI-generierte wirtschaftswissenschaftliche Inhalte sowie Trainer-/QS-Arbeit, bewerten die Ausgabequalität anhand von Projektrichtlinien, geben präzises schriftliches Feedback und stellen sicher, dass alle Mitwirkenden die erwarteten Qualitätsstandards einhalten.

Sie bewerten Arbeiten auf wirtschaftliche Genauigkeit, Modellschlussfolgerungen, Annahmen, Dateninterpretation, Rechenkorrektheit, Grapheninterpretation, politische Nuancen, Klarheit, Formatierung, Befolgung von Anweisungen und Einhaltung projektspezifischer Bewertungsraster. Sie erkennen wiederkehrende Qualitätsprobleme, kommunizieren Updates an Trainer und QS, unterstützen das Onboarding, pflegen Dokumentationen und helfen dabei, Mitwirkende zu aktivieren, die nicht konsistent arbeiten. Diese Rolle erfordert fundierte wirtschaftswissenschaftliche Expertise, starke Englischkenntnisse in der Kommunikation, ausgezeichnete Detailgenauigkeit, strukturierte Kommunikation und die Fähigkeit, Qualitätsworkflows über remote Expertenteams hinweg zu steuern.

Diese Rolle ist bei SME Careers, einem schnell wachsenden Unternehmen für KI-Datendienste und Tochtergesellschaft von SuperAnnotate, das Trainingsdaten für viele der weltweit größten KI-Unternehmen und Foundation-Model-Labs bereitstellt. Ihre wirtschaftswissenschaftliche Qualitätsführung trägt direkt dazu bei, die weltweit führenden KI-Modelle zu verbessern, indem sichergestellt wird, dass wirtschaftswissenschaftliche Trainingsdaten korrekt, analytisch fundiert, gut erklärt, annahmenbewusst und an den Erwartungen der Kunden ausgerichtet sind.

Der Auswahlprozess umfasst ein KI-Interview, eine domänenspezifische Aufgabe und ein Interview mit einem Recruiter.

Wichtig: Für diese Rolle gibt es derzeit kein unmittelbares Projekt; wenn Sie jedoch qualifiziert sind, gehören Sie zu den ersten Expertinnen und Experten, die wir kontaktieren, wenn sich relevante Möglichkeiten ergeben. Dies bietet Ihnen außerdem Zugang zu zukünftigen Projekten, die über unser Expertennetzwerk verfügbar sind.

Was Sie tun werden

• Qualitätsüberwachung: Stichprobenartige Prüfung wirtschaftswissenschaftlicher Aufgaben, Identifizierung von Qualitätsproblemen, kontinuierliches Feedback über DMs und Eskalation wiederkehrender oder kritischer Probleme.
• Wirtschaftswissenschaftliche Prüfung: Bewertung KI-generierter wirtschaftswissenschaftlicher Erklärungen, Berechnungen, Graphen, Politikanalysen, Dateninterpretationen und schrittweiser Schlussfolgerungen auf Genauigkeit und Klarheit.
• Kommunikation mit Trainern und QS: Updates für Trainer und QS auf Discord zu neuen Aufgabenrichtlinien, Projektänderungen, Workflow-Updates, Qualitätserwartungen und wirtschaftswissenschaftsspezifischen Prüfstandards.
• Bearbeitung von Fragen: Klare und zeitnahe Beantwortung von Fragen der Trainer/QS, insbesondere zu wirtschaftlichen Modellen, Annahmen, Formeln, Graphen, Kausalaussagen, Dateninterpretation und Rasterinterpretation.
• Verwaltung der Trainer-/QS-Aktivierung: DMs an inaktive oder nicht arbeitende Mitwirkende, Ermutigung zur Aktivierung, Nachverfolgung von Follow-ups und Kennzeichnung von Verfügbarkeitsproblemen bei Bedarf.
• Dokumentation: Erstellung und Pflege wirtschaftswissenschaftlicher Projektdokumentationen, einschließlich Stilrichtlinien, Trackern, FAQs, Qualitätsnotizen, Beispielen, Honeypots, Kalibrierungsaufgaben und Onboarding-Materialien.
• Onboarding und Schulung: Planung und Durchführung von Onboarding-/Schulungsgesprächen mit Trainern und QS zur Erläuterung von ProjektErwartungen, Workflows, Bewertungsrastern, Qualitätsstandards und wirtschaftswissenschaftsspezifischen Prüfanforderungen.
• Qualitätsausrichtung: Sicherstellung, dass alle Trainer und QS die wirtschaftswissenschaftlichen Prüfrichtlinien konsistent anwenden und Updates verstehen, während sich Projekte weiterentwickeln.
• Risikoprüfung: Kennzeichnung übermäßig selbstsicherer, irreführender, politisch voreingenommener, statistisch schwacher oder annahmenfreier wirtschaftlicher Aussagen.
• Prozessverbesserung: Identifizierung wiederkehrender Qualitätslücken, Vorschläge zur Workflow-Verbesserung und Unterstützung beim Aufbau skalierbarer QS-Prozesse für wirtschaftswissenschaftliche KI-Trainingsprojekte.

Was wir suchen

• Bachelor-, Master- oder PhD-Abschluss in Wirtschaftswissenschaft, Angewandter Wirtschaftswissenschaft, Ökonometrie, Public Policy, Finanzen, Statistik, Mathematik oder einem eng verwandten quantitativen/sozialwissenschaftlichen Bereich.
• Starkes Verständnis der englischen Sprache, um Projektrichtlinien zu befolgen, mit Teams zu kommunizieren und klares schriftliches Feedback zu geben.
• 3+ Jahre Erfahrung in wirtschaftswissenschaftlicher Forschung, Lehre, Politikanalyse, Wirtschaftsberatung, Datenanalyse, Ökonometrie, Inhaltsprüfung oder verwandten analytischen Workflows.
• Fundiertes Verständnis von Mikroökonomie, Makroökonomie, Marktstrukturen, Anreizen, Angebot und Nachfrage, Elastizität, Externalitäten, Geld-/Fiskalpolitik, Inflation, Arbeitslosigkeit, Handel, Wachstum und grundlegender ökonometrischer Argumentation.
• Fähigkeit, wirtschaftswissenschaftliche Inhalte anhand detaillierter Bewertungsraster zu bewerten und Probleme wie falsche Annahmen, fehlerhafte kausale Argumentation, falsche Formeln, irreführende Graphen, unbegründete politische Aussagen, schlechte Dateninterpretation oder übervereinfachte Schlussfolgerungen zu identifizieren.
• Vertrautheit mit Tools oder Methoden wie Regressionsanalyse, Kausalinferenz, Wirtschaftsmodellierung, Excel, R, Python, Stata, öffentlichen Datensätzen, Policy Briefs und akademischem wirtschaftswissenschaftlichem Schreiben ist von Vorteil.
• Erfahrung in der Leitung oder Unterstützung remote arbeitender Teams von Analysten, Forschern, Prüfern, Ausbildern, Annotatoren oder QS ist stark von Vorteil.
• Wohlfühlen in schnellebigen remote Umgebungen mit Tools wie Discord, Google Sheets, Google Docs, Trackern, Dashboards und Projektmanagementsystemen.
• Hochgradig detailorientiert und organisiert mit der Fähigkeit, Stilrichtlinien, FAQs, Tracker, Onboarding-Materialien, Kalibrierungsaufgaben und Dokumentationen zu pflegen.
• Erfahrung mit KI-Training, Datenannotation, LLM-Bewertung, wirtschaftswissenschaftlicher QS, akademischer Prüfung oder rasterbasierter Prüfung ist ein starkes Plus.