Über die Stelle
Über Turing:
Turing ist eines der weltweit am schnellsten wachsenden KI-Unternehmen und beschleunigt die Weiterentwicklung und den Einsatz leistungsfähiger KI-Systeme.
Turing unterstützt Kunden auf zwei Arten: Zum einen arbeitet Turing mit den weltweit führenden KI-Labs zusammen, um die Fähigkeiten von Frontier-Modellen in den Bereichen Denken, logisches Schlussfolgern, Programmieren, agentisches Verhalten, Multimodalität, Mehrsprachigkeit, MINT und Frontier-Wissen voranzubringen; zum anderen nutzt Turing diese Arbeit, um reale KI-Systeme zu entwickeln, die geschäftskritische Prioritäten von Unternehmen lösen.
Rollenübersicht:
Wir suchen einen hochqualifizierten Fachexperten bzw. eine hochqualifizierte Fachexpertin für TV-Serien und Filme, um große Sprachmodelle (LLMs) zu evaluieren und zu verbessern. Sie entwerfen anspruchsvolle Prompts, beurteilen sachliche Richtigkeit und Argumentation und identifizieren Wissenslücken in den Bereichen Film, Fernsehen, Streaming, Schauspieler, Regisseure, Genres, Auszeichnungen, Franchises und Unterhaltungsgeschichte.
Wichtigste Aufgaben
- Erstellung anspruchsvoller Prompts zu Film, Fernsehen, Streaming, Schauspielern, Regisseuren, Genres, Auszeichnungen, Franchises und Unterhaltungsgeschichte.
- Bewertung KI-generierter Antworten hinsichtlich sachlicher Richtigkeit, Qualität der Argumentation, Vollständigkeit und Nuancierung.
- Identifizierung von Halluzinationen, logischen Inkonsistenzen, veralteten Informationen und Sonderfällen.
- Entwicklung von Benchmark-Datensätzen und adversarialen Testfällen.
- Evidenzbasiertes Feedback mit verlässlichen Quellenangaben geben.
- Zusammenarbeit mit KI-Forschenden zur Verbesserung der Modellleistung.
- Aufrechterhaltung hoher Annotationsqualität und Dokumentation.
Tägliche Aufgaben
- Verfassen fachspezifischer Prompts unterschiedlicher Schwierigkeit.
- Vergleich mehrerer KI-Antworten und Rangordnung.
- Erklären, warum eine Antwort richtig oder falsch ist, anhand maßgeblicher Quellen.
- Identifizieren mehrdeutiger Fragen und Vorschlagen verbesserter Prompts.
Mindestqualifikationen
- Masterabschluss oder höher in einem beliebigen Fachgebiet; Abschlüsse in Filmwissenschaft, Fernsehwissenschaft, Medienwissenschaft, Journalismus, Kommunikationswissenschaften, Anglistik/Literatur, Screen Studies oder anderen unterhaltungsbezogenen Disziplinen werden bevorzugt.
- Fundierte Kenntnisse von Filmen und Fernsehen, einschließlich Vertrautheit mit Filmen, TV-Serien, Schauspielern, Regisseuren, Kreativen, Genres, Franchises, Auszeichnungen, Streaming-Plattformen und wichtigen Entwicklungen in der gesamten Unterhaltungsbranche.
- 3+ Jahre einschlägige Berufserfahrung, vorzugsweise im Unterhaltungsjournalismus, in der Film-/TV-Kritik, in Unterhaltungsmedien, Content-Erstellung, Forschung, Analyse, Berichterstattung oder einem verwandten Bereich.
- Ausgezeichnete schriftliche Englischkenntnisse sowie ausgezeichnete Recherche- und Analysefähigkeiten.
- Ausgeprägte Liebe zum Detail und die Fähigkeit, Informationen zu Filmen, Fernsehen und Unterhaltung präzise zu beurteilen.
Bevorzugte Qualifikationen
- Erfahrung mit LLMs, Generative AI, Prompt Engineering oder KI-Evaluierung.
- Veröffentlichte Forschungsarbeiten, Branchenanerkennung oder Lehrerfahrung sind von Vorteil.
- Fähigkeit, selbstständig zu arbeiten und objektive, evidenzgestützte Bewertungen abzugeben.
Angebotsdetails:
- Erforderlicher Zeitaufwand: 40 Stunden pro Woche mit mindestens 4 Stunden Überschneidung mit PST
- Beschäftigungsart: Auftragnehmer-Einsatz (keine Krankenversicherung/bezahlter Urlaub)
- Vertragsdauer: 8 Wochen.
- Standort: nur USA (außer Kalifornien, Connecticut, Massachusetts, New Jersey, Vermont)
Bewerbungsprozess
- Absolvieren Sie das Assessment, das Ihnen bereitgestellt wird.
- Unser Team bewertet Ihre Einreichung.
- Ausgewählte Kandidatinnen und Kandidaten werden bezüglich der nächsten Schritte kontaktiert.