Über die Stelle
In dieser stundenweisen Remote-Auftragnehmerrolle arbeiten Sie als Medicine Quality Assurance Lead (QAL) und überwachen Qualität, Konsistenz und Trainerleistung in medizinischen KI-Trainingsprojekten. Sie prüfen KI-generierte medizinische Inhalte sowie die Arbeit von Trainern/QAs, bewerten die Ausgabequalität anhand von Projektrichtlinien, geben präzises schriftliches Feedback und stellen sicher, dass alle Mitwirkenden die erwarteten Qualitätsstandards einhalten.
Sie bewerten Arbeiten hinsichtlich medizinischer Genauigkeit, Qualität der klinischen Argumentation, Leitlinienbewusstsein, Patientensicherheitsbewusstsein, Terminologiekorrektheit, Klarheit, Risikosensibilität, Formatierung, Befolgung von Anweisungen und Einhaltung projektspezifischer Rubriken. Sie erkennen wiederkehrende Qualitätsprobleme, kommunizieren Updates an Trainer und QAs, unterstützen das Onboarding, pflegen Dokumentation und helfen dabei, Mitwirkende zu aktivieren, die nicht kontinuierlich arbeiten. Diese Rolle erfordert fundierte medizinische Fachkenntnis, ausgeprägte Englischkenntnisse in der Kommunikation, hervorragende Detailgenauigkeit, strukturierte Kommunikation und die Fähigkeit, Qualitätsworkflows über remote arbeitende medizinische Prüfteams hinweg zu steuern.
Diese Rolle ist bei SME Careers angesiedelt, einem schnell wachsenden Unternehmen für KI-Datendienste und Tochtergesellschaft von SuperAnnotate, das Trainingsdaten für viele der weltweit größten KI-Unternehmen und Foundation-Model-Labs bereitstellt. Ihre medizinische Qualitätsführung trägt direkt dazu bei, die weltweit führenden KI-Modelle zu verbessern, indem sichergestellt wird, dass medizinische Trainingsdaten präzise, klinisch fundiert, klar erklärt, angemessen vorsichtig, sicherheitsbewusst, gut dokumentiert und mit den Erwartungen der Kunden abgestimmt sind.
Der Auswahlprozess umfasst ein KI-Interview, eine domänenspezifische Aufgabe und ein Interview mit einem Recruiter.
Wichtig: Für diese Rolle gibt es derzeit kein unmittelbares Projekt; wenn Sie jedoch qualifiziert sind, gehören Sie zu den ersten Expertinnen und Experten, die wir kontaktieren, sobald sich relevante Möglichkeiten ergeben. Dies verschafft Ihnen außerdem Zugang zu zukünftigen Projekten, die über unser Expertennetzwerk verfügbar sind.
Was Sie tun werden
- Qualitätsüberwachung: Stichprobenprüfung medizinischer Items, Erkennen von Qualitätsproblemen, laufendes Feedback über DMs und Eskalation wiederkehrender oder kritischer Probleme.
- Medizinische Prüfung: Bewertung KI-generierter medizinischer Erklärungen, klinischer Argumentation, patientengerichteter Antworten, Fallanalysen, diagnostischer Erörterungen, Behandlungszusammenfassungen, medikationsbezogener Inhalte und Gesundheitsbildungsmaterialien hinsichtlich Genauigkeit, Klarheit und angemessener Vorsicht.
- Kommunikation mit Trainern und QAs: Update von Trainern und QAs auf Discord zu neuen Item-Richtlinien, Projektänderungen, Workflow-Updates, Qualitätserwartungen und medizinprüfungsspezifischen Standards.
- Bearbeitung von Fragen: Klare und zeitnahe Beantwortung von Fragen von Trainern/QAs, insbesondere zu klinischer Argumentation, Terminologie, Patientensicherheitsrisiken, medizinischen Aussagen, Leitlinieninterpretation, Evidenzqualität und Anwendung von Rubriken.
- Verwaltung der Aktivierung von Trainern/QAs: DM an inaktive oder nicht arbeitende Mitwirkende, Ermutigung zur Aktivierung, Nachverfolgung von Follow-ups und Kennzeichnung von Verfügbarkeitsproblemen bei Bedarf.
- Dokumentation: Erstellung und Pflege medizinischer Projektdokumentation, einschließlich Style Guides, Trackern, FAQs, Qualitätsnotizen, Beispielen, Honeypots, Kalibrierungsaufgaben und Onboarding-Materialien.
- Onboarding und Schulung: Planung und Durchführung von Onboarding-/Schulungsgesprächen mit Trainern und QAs zur Erläuterung von Projekterwartungen, Workflows, Rubriken, Qualitätsstandards und medizinspezifischen Prüfanforderungen.
- Qualitätsabstimmung: Sicherstellung, dass alle Trainer und QAs medizinische Prüfrichtlinien konsistent anwenden und Updates verstehen, während sich Projekte weiterentwickeln.
- Risiko- und Sicherheitsprüfung: Kennzeichnung unsicherer, irreführender, übermäßig selbstsicherer oder klinisch unangemessener medizinischer Ausgaben, insbesondere wenn der Inhalt als personalisierte Diagnose, Behandlung, Notfallanleitung, Medikationsanweisung oder professionelle medizinische Beratung interpretiert werden könnte.
- Prozessverbesserung: Erkennung wiederkehrender Qualitätslücken, Vorschläge für Workflow-Verbesserungen und Unterstützung beim Aufbau skalierbarer QA-Prozesse für medizinische KI-Trainingsprojekte.
Was wir suchen
- Medizinischer Abschluss wie MD, DO, MBBS, MBChB oder gleichwertig; fortgeschrittene klinische, biomedizinische, pflegerische, pharmazeutische oder gesundheitsbezogene Abschlüsse können je nach Projektanforderungen berücksichtigt werden.
- Fundierte Englischkenntnisse, um Projektrichtlinien zu befolgen, mit Teams zu kommunizieren und klares Feedback zur medizinischen Prüfung auf Englisch zu geben.
- 3+ Jahre Berufserfahrung in Medizin, klinischer Praxis, medizinischer Forschung, medizinischer Ausbildung, klinischer Dokumentation, Gesundheits-QA, medizinischem Schreiben, Leitlinienprüfung oder verwandten Workflows.
- Fundiertes Verständnis zentraler medizinischer Themen wie klinische Argumentation, Differenzialdiagnose, Pathophysiologie, Pharmakologie, Diagnostik, Behandlungsprinzipien, Patientensicherheit, evidenzbasierte Medizin, medizinische Terminologie und Kommunikation im Gesundheitswesen.
- Fähigkeit, medizinische Inhalte anhand detaillierter Rubriken zu bewerten und Probleme zu erkennen wie unsichere Empfehlungen, halluzinierte Fakten, fehlende Einschränkungen, fehlerhafte klinische Argumentation, übermäßig selbstsichere Diagnose-/Behandlungsaussagen, unangemessene Patientenberatung oder unvollständige Erklärungen.
- Vertrautheit mit medizinischen Workflows oder Referenzen wie klinischen Leitlinien, diagnostischen Pfaden, Medikationssicherheit, Aktenprüfung, Fallzusammenfassungen, Patientenschulungsmaterialien, medizinischer Literatur und evidenzbasierter Prüfung ist von Vorteil.
- Erfahrung in der Leitung oder Unterstützung remote arbeitender Teams von Trainern, Annotatoren, Prüfern, Klinikern, medizinischen Autoren, Forschern, Pädagogen oder QAs ist stark von Vorteil.
- Komfortables Arbeiten in sich schnell verändernden Remote-Umgebungen mit Tools wie Discord, Google Sheets, Google Docs, Trackern, Dashboards und Projektmanagementsystemen.
- Hohe Detailgenauigkeit und Organisation, mit der Fähigkeit, Style Guides, FAQs, Tracker, Onboarding-Materialien, Honeypots, Kalibrierungsaufgaben und andere Qualitätsdokumentation zu pflegen.
- Erfahrung mit KI-Training, Datenannotation, großen Sprachmodellen, Prompt-/Antwortbewertung, medizinischer Inhalts-QA oder rubrikbasierter LLM-Bewertung ist ein starkes Plus.