Over de functie
Een project gericht op het beoordelen en benchmarken van geavanceerde agentische audiomodellen tegen toonaangevende systemen. De missie van het programma is om modelprestaties te evalueren en te optimaliseren voor realistische klantenservice-use cases. Verantwoordelijkheden
- Creëer en voer op rollenspel gebaseerde evaluatiescenario's uit die realistische klantenservice-interacties simuleren binnen meerdere domeinen, waaronder:
- Vluchtboekingen en reisondersteuning
- Financiële dienstverlening
- Telecommunicatie en technische ondersteuning
- Draag bij aan de ontwikkeling van diverse en representatieve datasets die worden gebruikt om conversationele audio-agenten te beoordelen.
- Evalueer modelprestaties aan de hand van een gestandaardiseerde set kwalitatieve en kwantitatieve metrics.
- Zorg ervoor dat evaluaties echte klantverwachtingen weerspiegelen op het gebied van duidelijkheid, efficiëntie en natuurlijke gespreksflow.
Evaluatiemetrics Modelprestaties worden beoordeeld met een combinatie van conversationele, technische en audio-specifieke criteria, waaronder maar niet beperkt tot:
- Nauwkeurigheid en efficiëntie van taakvoltooiing
- Conversationele natuurlijkheid (toon, flow en samenhang)
- Audiobegrip en kwaliteit van antwoorden
- Naleving van instructies en contextueel begrip
- Basiskennis van computerprogrammering, waaronder:
- Begrip van JSON-structuren
- Bekendheid met functies en methoden
- Vermogen om te redeneren over gestructureerde data en eenvoudige logica
- Duidelijkheid in technische communicatie bij het oplossen van problemen in supportstijl
Technische en apparatuurvereisten
- Sterke vloeiendheid in Engels
- Sterke verbale communicatievaardigheden in een gesimuleerde klantenservicecontext
- Hindi-vaardigheid, inclusief vloeiendheid in alle taalvaardigheden: lezen, luisteren, schrijven en spreken.
- Toegang tot een hoogwaardige microfoon om schone, betrouwbare audio-input tijdens evaluaties te garanderen
- Comfort met werken met gestructureerde prompts, evaluatierubrieken en technische richtlijnen
- Apparaat dat audioprogramma's kan uitvoeren en grote technische documentatie kan openen
We bieden een salarisbereik van $11 tot $30.65 per uur, waarbij het exacte tarief wordt bepaald na beoordeling van je ervaring, expertise en geografische locatie. Definitieve aanbiedingsbedragen kunnen afwijken van het hierboven vermelde salarisbereik. Als contractor zorg je voor een beveiligde computer en een snelle internetverbinding; door het bedrijf gesponsorde voordelen zoals ziektekostenverzekering en PTO zijn niet van toepassing.
Functietitel: Hindi Audio Specialist – AI Trainer Dienstverband: Contract Type werkplek: Op afstand Senioriteitsniveau: Mid‑Senior Level