Acerca del puesto
Un proyecto dedicado a evaluar y comparar modelos avanzados de audio agéntico con sistemas líderes. La misión del programa es evaluar y optimizar el rendimiento de los modelos para casos de uso reales de atención al cliente. Responsabilidades
- Crear y ejecutar escenarios de evaluación basados en juego de roles que simulen interacciones realistas de atención al cliente en múltiples dominios, incluidos:
- Reservas de vuelos y asistencia de viajes
- Servicios financieros
- Telecomunicaciones y soporte técnico
- Contribuir al desarrollo de conjuntos de datos diversos y representativos utilizados para evaluar agentes conversacionales de audio.
- Evaluar el rendimiento de los modelos según un conjunto estandarizado de métricas cualitativas y cuantitativas.
- Asegurar que las evaluaciones reflejen las expectativas reales de los clientes en cuanto a claridad, eficiencia y fluidez conversacional natural.
Métricas de evaluación El rendimiento de los modelos se evalúa mediante una combinación de criterios conversacionales, técnicos y específicos de audio, que incluyen, entre otros:
- Precisión y eficiencia en la finalización de tareas
- Naturalidad conversacional (tono, fluidez y coherencia)
- Comprensión de audio y calidad de las respuestas
- Cumplimiento de instrucciones y comprensión contextual
- Conocimientos básicos de programación informática, incluidos:
- Comprensión de estructuras JSON
- Familiaridad con funciones y métodos
- Capacidad para razonar sobre datos estructurados y lógica simple
- Claridad en la comunicación técnica al abordar la resolución de problemas estilo soporte
Requisitos técnicos y de equipamiento
- Sólidas habilidades de comunicación verbal en un contexto simulado de atención al cliente
- Dominio del inglés, incluida fluidez en todas las destrezas lingüísticas: lectura, comprensión auditiva, escritura y expresión oral.
- Acceso a un micrófono de alta calidad para garantizar una entrada de audio limpia y confiable durante las evaluaciones
- Comodidad trabajando con prompts estructurados, rúbricas de evaluación y directrices técnicas
- Dispositivo capaz de ejecutar software de grabación de audio y abrir documentación técnica extensa
Ofrecemos un rango salarial de $11 a $30.65 por hora, con la tarifa exacta determinada tras evaluar tu experiencia, conocimientos y ubicación geográfica. Los montos finales de la oferta pueden variar respecto al rango salarial indicado anteriormente. Como contratista, deberás proporcionar una computadora segura e internet de alta velocidad; los beneficios patrocinados por la empresa, como el seguro médico y las vacaciones remuneradas, no aplican.
Tipo de empleo: Contrato Tipo de lugar de trabajo: Remoto Nivel de seniority: Nivel intermedio-sénior