Über die Stelle
Qualitätsbewerter – Englisch
Hilf mit, die Zukunft der KI zu gestalten, indem du Antworten fortschrittlicher KI-Modelle bewertest und vergleichst.
- Standort: Remote
- Art: Unabhängiger Auftragnehmer / Teilzeit
- Dauer: bis zu 3 Monate
- Vergütung: $7-$12/Stunde
Über die Rolle
Bei Anyone AI erstellen wir hochwertige Trainings- und Bewertungsdaten für führende KI-Modelle.
Wir suchen englischsprachige Expertinnen und Experten mit ausgeprägten Schreibfähigkeiten, kritischem Denken und umfangreicher praktischer Erfahrung im Umgang mit großen Sprachmodellen (LLMs).
In dieser Rolle interagierst du direkt mit KI-Modellen und vergleichst ihre Antworten Seite an Seite, um festzustellen, welche die Bedürfnisse der Nutzer am besten erfüllt. Deine Bewertungen und schriftlichen Erläuterungen helfen dabei, die Genauigkeit, Nützlichkeit und Zuverlässigkeit von KI-Systemen zu verbessern.
Was du tun wirst
- Mit verschiedenen KI-Modellen und -Tools über eine Vielzahl von Prompts und Themen interagieren.
- Zwei oder mehr KI-generierte Antworten Seite an Seite vergleichen.
- Genauigkeit, Nützlichkeit, Befolgung der Anweisungen, Klarheit und Gesamtqualität der Antwort bewerten.
- Detaillierte Bewertungsrichtlinien und mehrstufige Bewertungsabläufe befolgen.
- Klare, gut begründete Erläuterungen zur Stützung deiner Bewertungsentscheidungen verfassen.
- Bewertungskriterien konsistent über Aufgaben hinweg anwenden.
Was wir suchen
- Fließende Englischkenntnisse mit starkem Leseverständnis und ausgeprägten Schreibfähigkeiten.
- Umfangreiche praktische Erfahrung im Umgang mit LLMs und in der kritischen Bewertung ihrer Ausgaben.
- Ausgeprägtes analytisches Urteilsvermögen und die Fähigkeit, mehrere Dimensionen der Antwortqualität abzuwägen.
- Hervorragende Detailgenauigkeit und die Fähigkeit, komplexe Anweisungen sorgfältig zu befolgen.
- Fähigkeit, Bewertungsentscheidungen klar und überzeugend zu erläutern.
- Sicherheit im Wechsel zwischen KI-Modellen, Tools und mehrstufigen Arbeitsabläufen.
Von Vorteil
- Frühere Erfahrung in der Bewertung von KI-Antworten, Datenannotation oder Qualitätssicherung.
- Erfahrung in Lektorat, Recherche, Faktenprüfung oder analytischem Schreiben.
- Vertrautheit mit Bewertungsrubriken und Aufgaben zum Seite-an-Seite-Vergleich.