Über die Stelle
Qualitätsbewerter – Englisch
Helfen Sie mit, die Zukunft der KI zu gestalten, indem Sie Antworten fortschrittlicher KI-Modelle bewerten und vergleichen.
- Standort: Remote
- Art: Unabhängiger Auftragnehmer / Teilzeit
- Dauer: bis zu 3 Monate
- Vergütung: $7-$12/Stunde
Über die Rolle
Bei Anyone AI erstellen wir hochwertige Trainings- und Bewertungsdaten für führende KI-Modelle.
Wir suchen englischsprachige Expertinnen und Experten mit ausgeprägten Schreibfähigkeiten, kritischem Denken und umfangreicher praktischer Erfahrung im Umgang mit großen Sprachmodellen (LLMs).
In dieser Rolle interagieren Sie direkt mit KI-Modellen und vergleichen deren Antworten Seite an Seite, um festzustellen, welche die Bedürfnisse der Nutzer am besten erfüllt. Ihre Bewertungen und schriftlichen Erklärungen tragen dazu bei, die Genauigkeit, Nützlichkeit und Zuverlässigkeit von KI-Systemen zu verbessern.
Was Sie tun werden
- Interagieren Sie mit verschiedenen KI-Modellen und -Tools über eine breite Palette von Prompts und Themen hinweg.
- Vergleichen Sie zwei oder mehr KI-generierte Antworten Seite an Seite.
- Bewerten Sie Genauigkeit, Nützlichkeit, Befolgung von Anweisungen, Klarheit und Gesamtqualität der Antwort.
- Befolgen Sie detaillierte Bewertungsrichtlinien und mehrstufige Bewertungsabläufe.
- Verfassen Sie klare, gut begründete Erklärungen zur Untermauerung Ihrer Bewertungsentscheidungen.
- Wenden Sie Bewertungskriterien konsequent auf alle Aufgaben an.
Was wir suchen
- Fließende Englischkenntnisse mit starkem Leseverständnis und ausgeprägten Schreibfähigkeiten.
- Umfangreiche praktische Erfahrung im Umgang mit LLMs und in der kritischen Bewertung ihrer Ergebnisse.
- Ausgeprägtes analytisches Urteilsvermögen und die Fähigkeit, mehrere Dimensionen der Antwortqualität abzuwägen.
- Ausgezeichnete Detailgenauigkeit und die Fähigkeit, komplexe Anweisungen sorgfältig zu befolgen.
- Fähigkeit, Bewertungsentscheidungen klar und überzeugend zu erklären.
- Sicherheit im Wechsel zwischen KI-Modellen, Tools und mehrstufigen Arbeitsabläufen.
Von Vorteil
- Frühere Erfahrung in der Bewertung von KI-Antworten, Datenannotation oder Qualitätssicherung.
- Erfahrung in den Bereichen Lektorat, Recherche, Faktenprüfung oder analytisches Schreiben.
- Vertrautheit mit Bewertungsrubriken und Aufgaben zum direkten Vergleich.