Evaluador de asistentes de IA de Gmail y Google Calendar

Título del puesto: Evaluador de asistentes de IA de Gmail y Google Calendar

Tipo de puesto: Contratista, remoto

Ubicación: solo Estados Unidos

micro1 contrata a Evaluadores de asistentes de IA de Gmail y Google Calendar para colaborar en un proyecto impulsado por un cliente que mejora la calidad de los asistentes de IA mediante la evaluación de tareas del mundo real. En este puesto, utilizará su experiencia cotidiana en la gestión de su vida digital (correo electrónico, calendarios, reservas y coordinación) para ayudar a entrenar y evaluar la próxima generación de asistentes de IA. Su trabajo influirá en cómo los modelos de IA manejan las tareas reales que las personas delegan todos los días.

Responsabilidades principales:

• Completar tareas digitales cotidianas realistas (enviar correos, programar, reservar, coordinar) utilizando herramientas de asistentes de IA en condiciones estandarizadas y repetibles.
• Dar a un asistente de IA instrucciones claras para tareas del mundo real y, a continuación, revisar y verificar con atención su trabajo en cuanto a precisión e integridad.
• Aplicar pautas de calificación detalladas para evaluar, clasificar y anotar las respuestas del asistente, proporcionando comentarios estructurados que mejoren el desempeño del modelo.
• Probar escenarios que involucren hilos de correo electrónico, invitaciones de calendario, reservas en línea y coordinación entre varias personas, asegurando la cobertura de situaciones diversas y casos límite.
• Utilizar herramientas y plataformas de entrenamiento de IA para registrar los hallazgos y enviar los datos de evaluación de acuerdo con los estándares y los hitos del proyecto.
• Colaborar con los entrenadores y colaboradores del proyecto para resolver ambigüedades, perfeccionar las pautas y garantizar la coherencia de la evaluación en todo el equipo.
• Participar en revisiones de calidad continuas, incorporando los comentarios para mantener estándares de evaluación rigurosos.

Habilidades y cualificaciones requeridas:

• Residir en EE. UU., tener un iPhone con iMessage y contar con una cuenta de Facebook o Instagram.
• Uso diario y práctico de Gmail y Google Calendar para gestionar su propia vida: enviar correos, aceptar invitaciones, programar y reorganizar planes.
• Experiencia habitual en la coordinación con otras personas por correo electrónico o mensaje de texto: organizar encuentros, dar seguimiento a conversaciones o confirmar planes y pagos compartidos.
• Soltura para hacer reservas en línea de forma independiente, como restaurantes, citas, viajes o entregas.
• Experiencia en el uso de herramientas de IA para tareas reales y prácticas, con soltura para dar instrucciones a un asistente de IA y comprobar su trabajo.
• Excepcional atención al detalle y a la precisión al revisar los resultados generados por IA.
• Sólidas habilidades de comunicación escrita para informar con claridad y ofrecer actualizaciones oportunas sobre el progreso y los desafíos.
• Gestión del tiempo y autoorganización demostradas para participar de forma independiente y remota en proyectos.

Cualificaciones preferidas:

• Experiencia previa en evaluación de IA, etiquetado de datos, pruebas con usuarios o proyectos similares basados en comentarios.
• Familiaridad con la redacción de prompts y comprensión práctica del comportamiento y las limitaciones de los asistentes de IA.
• Experiencia en la calificación o revisión de resultados de IA en cuanto a precisión, utilidad y seguridad.