Über die Stelle
Projektübersicht
Wir suchen unabhängige Spezialisten für Audio-Bewertungen für ein KI-Benchmark-Bewertungsprojekt, das fortschrittliche agentische Audiomodelle bewertet. Da KI-Modelle zunehmend komplexe Workflows in diesem Bereich übernehmen – insbesondere realistische Kundensupport-Szenarien wie Flugbuchungen, Finanzdienstleistungen und Telekommunikation – hängt ihre Genauigkeit vollständig von robusten, von Experten erstellten Trainingsdaten ab. Das Ziel dieses Projekts ist es, eigenständig hochwertige Bewertungsaufgaben durch simulierte Interaktionen zu erstellen, die Ausgaben konversationeller KI zu prüfen und saubere, zuverlässige Datensätze zu generieren, um die Modellleistung zu optimieren.
Projektergebnisse & Umfang
Eigenständiges Arbeiten zur Gestaltung komplexer Bewertungsframeworks und Bereitstellung strukturierter Trainingsdaten. Zu den erwarteten Ergebnissen gehören:
- Durchführung von Rollenspiel-Szenarien: Erstellung und Durchführung komplexer, auf Rollenspielen basierender Bewertungsszenarien, die realistische Kundenservice-Interaktionen in den Bereichen Reisen, Finanzen und technischer Support simulieren.
- Prüfung der Modellleistung: Bewertung der KI-Modellleistung anhand standardisierter qualitativer und quantitativer Metriken, mit strengem Fokus auf die Genauigkeit der Aufgabenausführung, die Natürlichkeit der Konversation und das Audioverständnis.
- Bewertung technischer Metriken: Beurteilung der grundlegenden Programmierkenntnisse des Modells, einschließlich seines Verständnisses von JSON-Strukturen, Funktionen, Methoden und seiner Fähigkeit, über strukturierte Daten im Support-Kontext zu schlussfolgern.
- Generierung repräsentativer Datensätze: Beitrag zur Entwicklung vielfältiger, hochwertiger Audiodatensätze, die die realen Kundenerwartungen an Klarheit, Effizienz und natürlichen Gesprächsfluss genau widerspiegeln.
Erforderliche Expertise
Um die Ergebnisse dieses Projekts erfolgreich zu erzielen, müssen Auftragnehmer über fundierte Branchenkenntnisse verfügen, um realistische berufliche Szenarien zu gestalten. Zu den Kernkompetenzen gehören:
- Nachweisbare berufliche Expertise in komplexem Kundensupport, technischer Fehlerbehebung oder der Bewertung konversationeller KI.
- Muttersprachliche oder zweisprachige Kenntnisse in der Zielsprache, einschließlich Fließfähigkeit in allen Sprachfertigkeiten (Lesen, Hören, Schreiben und Sprechen), sowie starke analytische und verbale Kommunikationsfähigkeiten, um simulierte Kundensupport-Rollenspiele souverän durchzuführen.
- Grundlegende Programmierkenntnisse, insbesondere ein sicheres Verständnis von JSON-Strukturen, Funktionen, Methoden und einfacher Logik.
- Eine akribische, detailorientierte Arbeitsweise mit strukturierten Prompts, komplexen Bewertungsrubriken und technischen Richtlinien.
- Erforderliche Ausstattung: Zugang zu einem hochwertigen Mikrofon, um bei Sprachbewertungen eine saubere, zuverlässige Audioeingabe zu gewährleisten.
Wir bieten eine Vergütungsspanne von $6 bis $65 pro Stunde, wobei der genaue Satz nach Bewertung Ihrer Erfahrung, Expertise und Ihres geografischen Standorts festgelegt wird. Die endgültigen Angebotsbeträge können von der oben angegebenen Vergütungsspanne abweichen. Als Auftragnehmer stellen Sie einen sicheren Computer und Hochgeschwindigkeitsinternet bereit; firmengesponserte Leistungen wie Krankenversicherung und bezahlter Urlaub gelten nicht.
Art der Zusammenarbeit: Freelance / Unabhängiger Auftragnehmer
Arbeitsumgebung: Remote