Líder de Aseguramiento de Calidad de Historia (QAL)

En este rol de contratista remoto por horas, trabajarás como Líder de Aseguramiento de Calidad de Historia (QAL) para supervisar la calidad, la consistencia y el desempeño de los entrenadores en proyectos de entrenamiento de IA centrados en historia. Revisarás contenido histórico generado por IA y el trabajo de entrenadores/QA, evaluarás la calidad de los resultados según las pautas del proyecto, brindarás retroalimentación escrita precisa y garantizarás que todos los contribuyentes sigan los estándares de calidad esperados.

Evaluarás el trabajo en cuanto a precisión histórica, cronología, conciencia de fuentes, causalidad, contexto, matices regionales y culturales, calidad de interpretación, claridad, formato, seguimiento de instrucciones y adherencia a las rúbricas específicas del proyecto. Detectarás problemas de calidad recurrentes, comunicarás actualizaciones a entrenadores y QA, apoyarás la incorporación, mantenerás documentación y ayudarás a activar a los contribuyentes que no están trabajando de manera constante. Este rol requiere una sólida experiencia en historia, sólidas habilidades de comunicación en inglés, excelente atención al detalle, comunicación estructurada y la capacidad de gestionar flujos de trabajo de calidad en equipos remotos de expertos.

Este rol es con SME Careers, una empresa de servicios de datos de IA en rápido crecimiento y subsidiaria de SuperAnnotate, que entrega datos de entrenamiento para muchas de las empresas de IA y laboratorios de modelos fundacionales más grandes del mundo. Tu liderazgo en calidad de historia ayudará directamente a mejorar los principales modelos de IA del mundo al garantizar que los datos de entrenamiento de historia sean precisos, contextualizados, equilibrados, bien explicados, bien documentados y alineados con las expectativas del cliente.

El proceso de selección incluye una entrevista con IA, una tarea específica del dominio y una entrevista con un reclutador.

Importante: No hay un proyecto inmediato para este rol; sin embargo, si estás calificado, estarás entre los primeros expertos a quienes contactaremos cuando surjan oportunidades relevantes. Esto también te brindará acceso a futuros proyectos disponibles a través de nuestra red de expertos.

Lo que harás

• Monitoreo de calidad: Revisar por muestreo elementos de historia, identificar problemas de calidad, brindar retroalimentación continua mediante mensajes directos y escalar problemas recurrentes o críticos.
• Revisión histórica: Evaluar explicaciones, cronologías, comparaciones, resúmenes, respuestas basadas en fuentes y razonamientos históricos generados por IA en cuanto a precisión, contexto, equilibrio y claridad.
• Comunicación con entrenadores y QA: Actualizar a entrenadores y QA en Discord sobre nuevas pautas de elementos, cambios del proyecto, actualizaciones de flujo de trabajo, expectativas de calidad y estándares de revisión específicos de historia.
• Gestión de preguntas: Responder preguntas de entrenadores/QA de manera clara y oportuna, especialmente sobre cronología, contexto histórico, interpretación de fuentes, interpretaciones disputadas, sesgo, matices regionales e interpretación de rúbricas.
• Gestión de activación de entrenadores/QA: Enviar mensajes directos a contribuyentes inactivos o que no están trabajando, fomentar la activación, realizar seguimiento y señalar problemas de disponibilidad cuando sea necesario.
• Documentación: Crear y mantener documentación de proyectos de historia, incluidos guías de estilo, rastreadores, preguntas frecuentes, notas de calidad, ejemplos, honeypots, tareas de calibración y materiales de incorporación.
• Incorporación y entrenamiento: Programar y realizar llamadas de incorporación/entrenamiento con entrenadores y QA para explicar las expectativas del proyecto, flujos de trabajo, rúbricas, estándares de calidad y requisitos de revisión específicos de historia.
• Alineación de calidad: Garantizar que todos los entrenadores y QA apliquen las pautas de revisión histórica de manera consistente y comprendan las actualizaciones a medida que evolucionan los proyectos.
• Revisión de riesgos y sesgos: Señalar afirmaciones históricas engañosas, excesivamente confiadas, sesgadas, culturalmente insensibles, anacrónicas o mal fundamentadas en fuentes.
• Mejora de procesos: Identificar brechas de calidad recurrentes, proponer mejoras en los flujos de trabajo y ayudar a construir procesos de QA escalables para proyectos de entrenamiento de IA en historia.

Lo que buscamos

• Título de Bachelor’s, Master’s o PhD en Historia, Clásicas, Estudios de Área, Arqueología, Historia Política, Historia Cultural, Relaciones Internacionales, Humanidades o un campo estrechamente relacionado.
• Sólido dominio del idioma inglés para seguir las pautas del proyecto, comunicarse con los equipos y brindar retroalimentación escrita clara.
• 3+ años de experiencia en investigación histórica, docencia, escritura, edición, revisión académica, trabajo en museos/archivos, desarrollo curricular o flujos de trabajo de humanidades relacionados.
• Sólida comprensión de métodos históricos, cronología, fuentes primarias vs. secundarias, historiografía, causalidad, continuidad/cambio, contexto regional e interpretación basada en evidencia.
• Capacidad para evaluar contenido histórico según rúbricas detalladas e identificar problemas como anacronismos, cronología incorrecta, afirmaciones no respaldadas, sobresimplificación, encuadres sesgados, citas fabricadas o explicaciones causales engañosas.
• Se prefiere familiaridad con una o más especializaciones históricas como historia antigua, historia medieval, historia moderna, historia mundial, historia militar, historia intelectual, historia social, historia económica, historia colonial/poscolonial o historia regional.
• Se prefiere fuertemente experiencia liderando o apoyando equipos remotos de investigadores, escritores, revisores, educadores, anotadores o QA.
• Cómodo trabajando en entornos remotos de ritmo rápido usando herramientas como Discord, Google Sheets, Google Docs, rastreadores, dashboards y sistemas de gestión de proyectos.
• Altamente orientado al detalle y organizado, con la capacidad de mantener guías de estilo, preguntas frecuentes, rastreadores, materiales de incorporación, tareas de calibración y documentación.
• Experiencia con entrenamiento de IA, anotación de datos, evaluación de LLM, QA académico, verificación de hechos o revisión basada en rúbricas es una gran ventaja.