Acerca del puesto
Descripción del proyecto
Estamos buscando Especialistas independientes en Evaluación de Audio para un proyecto de evaluación de benchmarks de IA que evalúa modelos de audio agénticos avanzados. A medida que los modelos de IA gestionan cada vez más flujos de trabajo complejos en este dominio —en concreto, escenarios reales de atención al cliente como reservas de vuelos, servicios financieros y telecomunicaciones— su precisión depende enteramente de datos de entrenamiento sólidos y elaborados por expertos. El objetivo de este proyecto es producir de forma autónoma tareas de evaluación de alta calidad mediante interacciones simuladas, auditar las salidas de IA conversacional y generar conjuntos de datos limpios y fiables para optimizar el rendimiento del modelo.
Entregables y alcance del proyecto
Operar de forma autónoma para diseñar marcos de evaluación complejos y proporcionar datos de entrenamiento estructurados. Los entregables previstos incluyen:
- Ejecución de escenarios de role-play: Crear y ejecutar escenarios de evaluación complejos basados en role-play que simulen interacciones realistas de atención al cliente en los ámbitos de viajes, finanzas y soporte técnico.
- Auditoría del rendimiento del modelo: Evaluar el rendimiento del modelo de IA según métricas cualitativas y cuantitativas estandarizadas, centrándose estrictamente en la precisión de finalización de tareas, la naturalidad conversacional y la comprensión de audio.
- Evaluación de métricas técnicas: Evaluar la alfabetización básica en programación informática del modelo, incluida su comprensión de estructuras JSON, funciones, métodos y su capacidad para razonar sobre datos estructurados dentro de un contexto de soporte.
- Generación de conjuntos de datos representativos: Contribuir al desarrollo de conjuntos de datos de audio diversos y de alta calidad que reflejen con precisión las expectativas reales de los clientes en cuanto a claridad, eficiencia y flujo conversacional natural.
Experiencia requerida
Para cumplir con éxito los entregables de este proyecto, los Contratistas deben poseer un profundo conocimiento del sector para elaborar escenarios profesionales realistas. El conjunto de competencias principales incluye:
- Experiencia profesional demostrable en atención al cliente compleja, resolución técnica de problemas o evaluación de IA conversacional.
- Dominio nativo o bilingüe del idioma objetivo, incluida fluidez en todas las destrezas lingüísticas (lectura, comprensión auditiva, escritura y expresión oral), junto con sólidas habilidades analíticas y de comunicación verbal para realizar con confianza simulaciones de role-play de atención al cliente.
- Alfabetización básica en programación informática, en concreto una comprensión cómoda de estructuras JSON, funciones, métodos y lógica simple.
- Un enfoque meticuloso y orientado al detalle al trabajar con prompts estructurados, rúbricas de evaluación complejas y directrices técnicas.
- Equipo requerido: Acceso a un micrófono de alta calidad para garantizar una entrada de audio limpia y fiable durante las evaluaciones de voz.
Ofrecemos una horquilla salarial de $6 a $65 por hora, con la tarifa exacta determinada tras evaluar tu experiencia, conocimientos y ubicación geográfica. Los importes finales de la oferta pueden variar respecto a la horquilla salarial indicada anteriormente. Como contratista, deberás disponer de un ordenador seguro e internet de alta velocidad; los beneficios patrocinados por la empresa, como el seguro de salud y las vacaciones remuneradas (PTO), no se aplican.
Tipo de contratación: Freelance / Contratista independiente
Modalidad de trabajo: Remoto