Über die Stelle
Ein Projekt zur Bewertung und zum Benchmarking fortschrittlicher agentischer Audiomodelle gegenüber führenden Systemen. Die Mission des Programms besteht darin, die Modellleistung für realistische Kundensupport-Anwendungsfälle zu bewerten und zu optimieren.
Aufgaben
- Erstellung und Durchführung rollenspielbasierter Bewertungsszenarien, die realistische Kundenservice-Interaktionen in mehreren Domänen simulieren, darunter:
- Flugbuchungen und Reise-Support
- Finanzdienstleistungen
- Telekommunikation und technischer Support
- Mitwirkung an der Entwicklung vielfältiger und repräsentativer Datensätze zur Bewertung konversationeller Audio-Agenten.
- Bewertung der Modellleistung anhand eines standardisierten Sets qualitativer und quantitativer Metriken.
- Sicherstellung, dass die Bewertungen die realen Kundenerwartungen an Klarheit, Effizienz und natürlichen Gesprächsfluss widerspiegeln.
Bewertungsmetriken
Die Modellleistung wird anhand einer Kombination aus konversationellen, technischen und audiospezifischen Kriterien bewertet, darunter unter anderem:
- Genauigkeit und Effizienz bei der Aufgabenbewältigung
- Natürlichkeit der Konversation (Ton, Fluss und Kohärenz)
- Audioverständnis und Antwortqualität
- Befolgung von Anweisungen und kontextuelles Verständnis
- Grundlegende Computerprogrammierkenntnisse, darunter:
- Verständnis von JSON-Strukturen
- Vertrautheit mit Funktionen und Methoden
- Fähigkeit, über strukturierte Daten und einfache Logik zu reasoning
- Klarheit der technischen Kommunikation bei der Bewältigung von Problemlösungen im Support-Stil
Technische & Ausstattungs-Anforderungen
- Sehr gute Englischkenntnisse
- Ausgeprägte mündliche Kommunikationsfähigkeiten in einem simulierten Kundensupport-Kontext
- Spanisch-Kenntnisse einschließlich Fließfähigkeit in allen Sprachfertigkeiten: Lesen, Hören, Schreiben und Sprechen.
- Zugang zu einem hochwertigen Mikrofon, um eine saubere, zuverlässige Audioeingabe während der Bewertungen zu gewährleisten
- Komfort im Umgang mit strukturierten Prompts, Bewertungsrubriken und technischen Richtlinien
- Gerät, das Audioaufnahmesoftware ausführen und umfangreiche technische Dokumentation öffnen kann
Wir bieten eine Vergütungsspanne von $11 bis $30.65 pro Stunde, wobei der genaue Satz nach Bewertung Ihrer Erfahrung, Expertise und Ihres geografischen Standorts festgelegt wird. Die finalen Angebotsbeträge können von der oben angegebenen Vergütungsspanne abweichen. Als Auftragnehmer stellen Sie einen sicheren Computer und Hochgeschwindigkeitsinternet bereit; firmensponsorierte Leistungen wie Krankenversicherung und bezahlter Urlaub gelten nicht.
Stellenbezeichnung: Spanischer Audio-Spezialist – KI-Trainer Beschäftigungsart: Vertrag Arbeitsplatztyp: Remote Senioritätsstufe: Mid-Senior-Level