Über die Stelle
Über Turing:
Turing ist eines der weltweit am schnellsten wachsenden KI-Unternehmen und beschleunigt die Weiterentwicklung und den Einsatz leistungsfähiger KI-Systeme.
Turing unterstützt Kunden auf zwei Arten: Zum einen arbeitet Turing mit den weltweit führenden KI-Labs zusammen, um die Fähigkeiten von Frontier-Modellen in den Bereichen Denken, logisches Schlussfolgern, Programmieren, agentisches Verhalten, Multimodalität, Mehrsprachigkeit, MINT und Frontier-Wissen voranzubringen; zum anderen nutzt Turing diese Arbeit, um reale KI-Systeme zu entwickeln, die geschäftskritische Prioritäten von Unternehmen lösen.
Rollenübersicht:
Wir suchen einen hochqualifizierten Fachexperten bzw. eine hochqualifizierte Fachexpertin für Kunst, um große Sprachmodelle (LLMs) zu evaluieren und zu verbessern. Sie entwerfen anspruchsvolle Prompts, beurteilen sachliche Richtigkeit und Argumentation und identifizieren Wissenslücken in den Bereichen Bildende Kunst, visuelle Künste, Architektur, Design, Kunstgeschichte, Museen und Künstler.
Wichtigste Aufgaben
- Erstellung anspruchsvoller Prompts zu bildender Kunst, visuellen Künsten, Architektur, Design, Kunstgeschichte, Museen und Künstlern.
- Bewertung KI-generierter Antworten hinsichtlich sachlicher Richtigkeit, Qualität der Argumentation, Vollständigkeit und Nuancierung.
- Identifizierung von Halluzinationen, logischen Inkonsistenzen, veralteten Informationen und Sonderfällen.
- Entwicklung von Benchmark-Datensätzen und adversarialen Testfällen.
- Evidenzbasiertes Feedback mit verlässlichen Quellenangaben geben.
- Zusammenarbeit mit KI-Forschenden zur Verbesserung der Modellleistung.
- Aufrechterhaltung hoher Annotationsqualität und Dokumentation.
Tägliche Aufgaben
- Verfassen fachspezifischer Prompts unterschiedlicher Schwierigkeit.
- Vergleich mehrerer KI-Antworten und Rangordnung.
- Erklären, warum eine Antwort richtig oder falsch ist, anhand maßgeblicher Quellen.
- Identifizieren mehrdeutiger Fragen und Vorschlagen verbesserter Prompts.
Mindestqualifikationen
- Masterabschluss oder höher in einem beliebigen Fachgebiet; Abschlüsse in Kunstgeschichte, Bildender Kunst, Visuellen Künsten, Museumskunde, Kulturwissenschaften, Design, Geisteswissenschaften oder anderen kunstbezogenen Disziplinen werden bevorzugt.
- Fundierte Kenntnisse der Kunst, einschließlich Vertrautheit mit bedeutenden Künstlern, Kunstwerken, Kunstbewegungen, Stilen, Epochen, Techniken, Museen, kulturellen Traditionen und Entwicklungen in den visuellen Künsten.
- 3+ Jahre einschlägige Berufserfahrung, vorzugsweise in Kunstforschung, Wissenschaft, Museen, Galerien, Kuration, Kunstkritik oder -journalismus, Bildung, Verlagswesen, Kunst- und Kulturinhalten oder einem verwandten Bereich.
- Ausgezeichnete schriftliche Englischkenntnisse sowie ausgezeichnete Recherche- und Analysefähigkeiten.
- Ausgeprägte Liebe zum Detail und die Fähigkeit, künstlerische, historische und kulturelle Informationen präzise und im angemessenen Kontext zu beurteilen.
Bevorzugte Qualifikationen
- Erfahrung mit LLMs, Generative AI, Prompt Engineering oder KI-Evaluierung.
- Veröffentlichte Forschungsarbeiten, Branchenanerkennung oder Lehrerfahrung sind von Vorteil.
- Fähigkeit, selbstständig zu arbeiten und objektive, evidenzgestützte Bewertungen abzugeben.
Angebotsdetails:
- Erforderlicher Zeitaufwand: 40 Stunden pro Woche mit mindestens 4 Stunden Überschneidung mit PST
- Beschäftigungsart: Auftragnehmer-Einsatz (keine Krankenversicherung/bezahlter Urlaub)
- Vertragsdauer: 8 Wochen.
Bewerbungsprozess
- Absolvieren Sie das Assessment, das Ihnen bereitgestellt wird.
- Unser Team bewertet Ihre Einreichung.
- Ausgewählte Kandidatinnen und Kandidaten werden bezüglich der nächsten Schritte kontaktiert.