Über die Stelle
Projektübersicht
Wir suchen unabhängige Spezialisten für Audio-Bewertungen für ein KI-Benchmark-Bewertungsprojekt zur Beurteilung fortgeschrittener agentischer Audiomodelle. Da KI-Modelle zunehmend komplexe Workflows in diesem Bereich bewältigen – insbesondere realistische Kundensupport-Szenarien wie Flugbuchungen, Finanzdienstleistungen und Telekommunikation –, hängt ihre Genauigkeit vollständig von robusten, von Experten erstellten Trainingsdaten ab. Das Ziel dieses Projekts ist es, autonom hochwertige Bewertungsaufgaben durch simulierte Interaktionen zu erstellen, die Ausgaben konversationeller KI zu prüfen und saubere, zuverlässige Datensätze zu generieren, um die Modellleistung zu optimieren.
Projektergebnisse & Umfang
Eigenständiges Arbeiten bei der Konzeption komplexer Bewertungsframeworks und Bereitstellung strukturierter Trainingsdaten. Zu den erwarteten Ergebnissen gehören:
- Durchführung von Rollenspiel-Szenarien: Erstellung und Durchführung komplexer, rollenspielbasierter Bewertungsszenarien, die realistische Kundenservice-Interaktionen in den Bereichen Reisen, Finanzen und technischer Support simulieren.
- Prüfung der Modellleistung: Bewertung der Leistung von KI-Modellen anhand standardisierter qualitativer und quantitativer Metriken mit striktem Fokus auf die Genauigkeit der Aufgabenausführung, die Natürlichkeit der Konversation und das Audioverständnis.
- Bewertung technischer Metriken: Beurteilung der grundlegenden Programmierkenntnisse des Modells, einschließlich seines Verständnisses von JSON-Strukturen, Funktionen, Methoden und seiner Fähigkeit, über strukturierte Daten im Support-Kontext zu schließen.
- Erstellung repräsentativer Datensätze: Beitrag zur Entwicklung vielfältiger, hochwertiger Audiodatensätze, die die realen Kundenerwartungen an Klarheit, Effizienz und natürlichen Gesprächsfluss genau widerspiegeln.
Erforderliche Fachkenntnisse
Um die Ergebnisse dieses Projekts erfolgreich zu erzielen, müssen Auftragnehmer über fundierte Branchenkenntnisse verfügen, um realistische berufliche Szenarien zu gestalten. Zum Kernkompetenzprofil gehören:
- Nachweisbare berufliche Expertise in komplexem Kundensupport, technischer Fehlerbehebung oder der Bewertung konversationeller KI.
- Muttersprachliche oder zweisprachige Kenntnisse der Zielsprache, einschließlich Fließfähigkeit in allen Sprachfertigkeiten (Lesen, Hören, Schreiben und Sprechen), sowie starke analytische und verbale Kommunikationsfähigkeiten, um simulierte Kundensupport-Rollenspiele souverän durchzuführen.
- Grundlegende Programmierkenntnisse, insbesondere ein sicheres Verständnis von JSON-Strukturen, Funktionen, Methoden und einfacher Logik.
- Eine akribische, detailorientierte Arbeitsweise mit strukturierten Prompts, komplexen Bewertungsrubriken und technischen Richtlinien.
- Erforderliche Ausstattung: Zugang zu einem hochwertigen Mikrofon, um bei Sprachbewertungen eine saubere, zuverlässige Audioeingabe zu gewährleisten.
Wir bieten eine Vergütungsspanne von $6 bis $65 pro Stunde; der genaue Satz wird nach Bewertung Ihrer Erfahrung, Expertise und Ihres geografischen Standorts festgelegt. Die endgültigen Angebotsbeträge können von der oben genannten Vergütungsspanne abweichen. Als Auftragnehmer stellen Sie einen sicheren Computer und eine Hochgeschwindigkeits-Internetverbindung; vom Unternehmen gesponserte Leistungen wie Krankenversicherung und bezahlter Urlaub gelten nicht.
Art der Beschäftigung: Freelance / Unabhängiger Auftragnehmer
Arbeitsumfeld: Remote