Über die Stelle
Qualitätsbewerter – Englisch
Helfen Sie, die Zukunft der KI mitzugestalten, indem Sie Antworten fortschrittlicher KI-Modelle bewerten und vergleichen.
- Standort: Remote
- Art: Unabhängiger Auftragnehmer / Teilzeit
- Dauer: bis zu 3 Monate
- Vergütung: $7-$12/Stunde
Über die Rolle
Bei Anyone AI erstellen wir hochwertige Trainings- und Bewertungsdaten für KI-Modelle der neuesten Generation.
Wir suchen englischsprachige Expertinnen und Experten mit ausgeprägten Schreibfähigkeiten, kritischem Denken und umfangreicher praktischer Erfahrung im Umgang mit großen Sprachmodellen (LLMs).
In dieser Rolle arbeiten Sie direkt mit KI-Modellen zusammen und vergleichen deren Antworten Seite an Seite, um festzustellen, welche die Bedürfnisse der Nutzer am besten erfüllt. Ihre Bewertungen und schriftlichen Erläuterungen tragen dazu bei, die Genauigkeit, Nützlichkeit und Zuverlässigkeit von KI-Systemen zu verbessern.
Was Sie tun werden
- Mit verschiedenen KI-Modellen und -Tools über ein breites Spektrum von Prompts und Themen interagieren.
- Zwei oder mehr KI-generierte Antworten Seite an Seite vergleichen.
- Genauigkeit, Nützlichkeit, Befolgung von Anweisungen, Klarheit und Gesamtqualität der Antworten bewerten.
- Detaillierte Bewertungsrichtlinien und mehrstufige Bewertungsabläufe befolgen.
- Klare, gut begründete Erläuterungen zur Stützung Ihrer Bewertungsentscheidungen verfassen.
- Bewertungskriterien konsequent auf alle Aufgaben anwenden.
Was wir suchen
- Fließende Englischkenntnisse mit starkem Leseverständnis und ausgeprägten Schreibfähigkeiten.
- Umfangreiche praktische Erfahrung im Umgang mit LLMs und in der kritischen Beurteilung ihrer Ausgaben.
- Ausgeprägtes analytisches Urteilsvermögen und die Fähigkeit, mehrere Dimensionen der Antwortqualität gegeneinander abzuwägen.
- Ausgezeichnete Detailgenauigkeit und die Fähigkeit, komplexe Anweisungen sorgfältig zu befolgen.
- Fähigkeit, Bewertungsentscheidungen klar und überzeugend zu erläutern.
- Sicherer Wechsel zwischen KI-Modellen, Tools und mehrstufigen Abläufen.
Von Vorteil
- Frühere Erfahrung in der Bewertung von KI-Antworten, Datenannotation oder Qualitätssicherung.
- Erfahrung in Lektorat, Recherche, Faktenprüfung oder analytischem Schreiben.
- Vertrautheit mit Bewertungsrubriken und Aufgaben zum direkten Vergleich.