Acerca del puesto
Título del puesto: Evaluador de productos de IA
Tipo de puesto: Contratista
Ubicación: India, Japón o Reino Unido, Remoto
micro1 está contratando a Evaluadores de productos de IA expertos para que contribuyan directamente a un proyecto de IA de alto impacto de un cliente. En este puesto, aplicará su experiencia para ayudar a entrenar los sistemas de IA de próxima generación. Su trabajo determinará cómo aprenden, razonan y se desempeñan los modelos mediante aportaciones de alta calidad basadas en el mundo real. Este proyecto, de carácter muy operativo, implica realizar evaluaciones de modelos y agentes de IA, a menudo dentro de plazos estrictos y con reinicios de los límites de uso. El proyecto se beneficia en gran medida de las contribuciones de varios especialistas, cada uno de los cuales aporta un enfoque meticuloso en el seguimiento de instrucciones y el control de calidad.
Alcance del trabajo
- Evaluar modelos y agentes de IA de acuerdo con escenarios y directrices detallados y predefinidos.
- Ejecutar una serie de tareas operativas diseñadas para poner a prueba la precisión, el razonamiento y la capacidad de respuesta del modelo.
- Documentar los hallazgos, las observaciones y cualquier anomalía en informes escritos estructurados.
- Reiniciar los límites de uso y repetir las evaluaciones según lo requieran los protocolos del proyecto.
- Registrar los hallazgos y enviar los conjuntos de datos de evaluación en plataformas de entrenamiento de IA de acuerdo con los estándares y los hitos del proyecto.
- Mantener un alto nivel de atención al detalle y rigor en todas las tareas de evaluación. -
Cualificaciones preferidas
- Experiencia con productos de IA, modelos de IA o evaluación y pruebas de agentes de IA.
- Capacidad demostrada para seguir instrucciones complejas con precisión y coherencia.
- Atención excepcional al detalle y minuciosidad operativa.
- Alguien que ya utilice la IA en su vida diaria.
- Comodidad al trabajar con tareas operativas repetitivas o de gran volumen dentro de plazos estrictos.
- Haber participado previamente en proyectos de productos digitales, control de calidad de software o investigación en IA es un plus.
- Persona orientada al detalle, con gran capacidad para seguir instrucciones y documentar cada paso.