Evaluator für KI-Assistenten in Gmail und Google Calendar

Stellenbezeichnung: Evaluator für KI-Assistenten in Gmail und Google Calendar

Vertragsart: Auftragnehmer, Remote

Standort: Nur Vereinigte Staaten

micro1 sucht Evaluatoren für KI-Assistenten in Gmail und Google Calendar, die an einem kundengetriebenen Projekt zur Verbesserung der Qualität von KI-Assistenten durch die Bewertung realer Aufgaben mitwirken. In dieser Rolle nutzen Sie Ihre alltägliche Erfahrung im Management Ihres digitalen Lebens – E-Mail, Kalender, Buchungen und Koordination –, um die nächste Generation von KI-Assistenten zu trainieren und zu bewerten. Ihre Arbeit prägt, wie KI-Modelle mit den realen Aufgaben umgehen, die Menschen jeden Tag delegieren.

Hauptaufgaben:

• Erledigen Sie realistische, alltägliche digitale Aufgaben (E-Mails schreiben, Termine planen, buchen, koordinieren) mit KI-Assistenten-Tools unter standardisierten, wiederholbaren Bedingungen.
• Geben Sie einem KI-Assistenten klare Anweisungen für reale Aufgaben und prüfen und verifizieren Sie anschließend sorgfältig seine Arbeit auf Richtigkeit und Vollständigkeit.
• Wenden Sie detaillierte Bewertungsrichtlinien an, um Antworten des Assistenten zu bewerten, zu ranken und zu annotieren, und geben Sie strukturiertes Feedback, das die Modellleistung verbessert.
• Testen Sie Szenarien mit E-Mail-Verläufen, Kalendereinladungen, Online-Buchungen und Koordination mehrerer Personen und stellen Sie dabei die Abdeckung vielfältiger Situationen und Randfälle sicher.
• Nutzen Sie KI-Trainingstools und -Plattformen, um Erkenntnisse festzuhalten und Bewertungsdaten gemäß den Projektstandards und Meilensteinen einzureichen.
• Arbeiten Sie mit Projekttrainern und Mitwirkenden zusammen, um Mehrdeutigkeiten zu klären, Richtlinien zu verfeinern und die Konsistenz der Bewertungen im Team sicherzustellen.
• Nehmen Sie an laufenden Qualitätsprüfungen teil und berücksichtigen Sie Feedback, um strenge Bewertungsstandards aufrechtzuerhalten.

Erforderliche Fähigkeiten und Qualifikationen:

• Sie leben in den USA, besitzen ein iPhone mit iMessage und haben ein Facebook- oder Instagram-Konto.
• Tägliche, praktische Nutzung von Gmail und Google Calendar zur Organisation Ihres eigenen Lebens: E-Mails senden, Einladungen annehmen, Termine planen und Pläne umstellen.
• Regelmäßige Erfahrung in der Abstimmung mit anderen per E-Mail oder Textnachricht – Treffen organisieren, Gesprächsverläufe nachverfolgen oder gemeinsame Pläne und Zahlungen bestätigen.
• Sicherer Umgang damit, selbstständig online zu buchen, etwa Restaurants, Termine, Reisen oder Lieferungen.
• Erfahrung im Einsatz von KI-Tools für echte, praktische Aufgaben sowie Sicherheit darin, einem KI-Assistenten Anweisungen zu geben und seine Arbeit zu überprüfen.
• Außergewöhnliche Liebe zum Detail und Genauigkeit bei der Prüfung KI-generierter Ausgaben.
• Ausgeprägte schriftliche Kommunikationsfähigkeiten für klare Berichterstattung und zeitnahe Updates zu Fortschritten und Herausforderungen.
• Nachgewiesenes Zeitmanagement und Selbstorganisation für eine eigenständige Projektmitarbeit im Remote-Modus.

Bevorzugte Qualifikationen:

• Frühere Erfahrung mit KI-Evaluierung, Datenlabeling, Nutzertests oder ähnlichen feedbackgetriebenen Projekten.
• Vertrautheit mit dem Schreiben von Prompts und ein praktisches Verständnis des Verhaltens und der Grenzen von KI-Assistenten.
• Erfahrung in der Bewertung oder Prüfung von KI-Ausgaben auf Richtigkeit, Hilfreichkeit und Sicherheit.