Líder de Aseguramiento de la Calidad (QAL) en Ciencias Políticas

En este rol de contratista remoto por horas, trabajarás como Líder de Aseguramiento de la Calidad (QAL) en Ciencias Políticas para supervisar la calidad, la consistencia y el desempeño de los entrenadores en proyectos de entrenamiento de IA en ciencias políticas. Revisarás contenido de ciencias políticas generado por IA y el trabajo de entrenadores/QA, evaluarás la calidad de los resultados según las directrices del proyecto, proporcionarás retroalimentación escrita precisa y garantizarás que todos los colaboradores sigan los estándares de calidad esperados.

Evaluarás el trabajo en cuanto a precisión conceptual, conocimiento institucional, contexto comparativo, precisión de teoría política, razonamiento de políticas, conciencia de fuentes, sensibilidad a sesgos, claridad, formato, seguimiento de instrucciones y adherencia a rúbricas específicas del proyecto. Detectarás problemas recurrentes de calidad, comunicarás actualizaciones a entrenadores y QAs, apoyarás la incorporación, mantendrás documentación y ayudarás a activar a colaboradores que no están trabajando de manera consistente. Este rol requiere sólida experiencia en ciencias políticas, sólidas habilidades de comunicación en inglés, excelente atención al detalle, comunicación estructurada y la capacidad de gestionar flujos de trabajo de calidad en equipos remotos de expertos.

Este rol es con SME Careers, una empresa de servicios de datos de IA de rápido crecimiento y subsidiaria de SuperAnnotate, que proporciona datos de entrenamiento para muchas de las empresas de IA y laboratorios de modelos fundacionales más grandes del mundo. Tu liderazgo en calidad de ciencias políticas ayudará directamente a mejorar los principales modelos de IA del mundo al garantizar que los datos de entrenamiento en ciencias políticas sean precisos, equilibrados, bien contextualizados, analíticamente sólidos y alineados con las expectativas del cliente.

El proceso de selección incluye una entrevista con IA, una tarea específica del dominio y una entrevista con un reclutador.

Importante: No hay un proyecto inmediato para este rol; sin embargo, si estás calificado, estarás entre los primeros expertos a quienes contactaremos cuando surjan oportunidades relevantes. Esto también te brindará acceso a futuros proyectos disponibles a través de nuestra red de expertos.

Lo que harás

• Monitoreo de calidad: Revisar por muestreo elementos de ciencias políticas, identificar problemas de calidad, proporcionar retroalimentación continua mediante mensajes directos y escalar problemas recurrentes o críticos.
• Revisión de ciencias políticas: Evaluar explicaciones de ciencias políticas generadas por IA, análisis comparativos, resúmenes de políticas, discusiones de teoría política, descripciones institucionales y razonamientos en cuanto a precisión y equilibrio.
• Comunicación con entrenadores y QA: Actualizar a entrenadores y QAs en Discord sobre nuevas directrices de elementos, cambios del proyecto, actualizaciones de flujo de trabajo, expectativas de calidad y estándares de revisión específicos de ciencias políticas.
• Gestión de preguntas: Responder preguntas de entrenadores/QA de manera clara y oportuna, especialmente sobre instituciones, política comparada, políticas públicas, teoría política, relaciones internacionales, sesgos e interpretación de rúbricas.
• Gestión de activación de entrenadores/QA: Enviar mensajes directos a colaboradores inactivos o que no están trabajando, fomentar la activación, hacer seguimiento y señalar problemas de disponibilidad cuando sea necesario.
• Documentación: Crear y mantener documentación de proyectos de ciencias políticas, incluidos guías de estilo, rastreadores, preguntas frecuentes, notas de calidad, ejemplos, honeypots, tareas de calibración y materiales de incorporación.
• Incorporación y entrenamiento: Programar y realizar llamadas de incorporación/entrenamiento con entrenadores y QAs para explicar las expectativas del proyecto, flujos de trabajo, rúbricas, estándares de calidad y requisitos de revisión específicos de ciencias políticas.
• Alineación de calidad: Garantizar que todos los entrenadores y QAs apliquen las directrices de revisión de ciencias políticas de manera consistente y comprendan las actualizaciones a medida que evolucionan los proyectos.
• Revisión de sesgos y riesgos: Señalar afirmaciones engañosas, ideológicamente sesgadas, no respaldadas, desactualizadas, políticamente inflamatorias o deficientemente contextualizadas.
• Mejora de procesos: Identificar brechas recurrentes de calidad, proponer mejoras en los flujos de trabajo y ayudar a construir procesos de QA escalables para proyectos de entrenamiento de IA en ciencias políticas.

Lo que buscamos

• Título de Bachelor’s, Master’s o PhD en Ciencias Políticas, Relaciones Internacionales, Políticas Públicas, Gobierno, Teoría Política, Estudios de Seguridad, Derecho, Sociología, Economía o un campo de ciencias sociales estrechamente relacionado.
• Sólido dominio del idioma inglés para seguir las directrices del proyecto, comunicarse con los equipos y proporcionar retroalimentación escrita clara.
• 3+ años de experiencia en investigación en ciencias políticas, docencia, análisis de políticas, asuntos públicos, relaciones internacionales, escritura política, revisión académica o flujos de trabajo analíticos relacionados.
• Sólido entendimiento de instituciones políticas, política comparada, relaciones internacionales, políticas públicas, teoría política, sistemas electorales, gobernanza, capacidad estatal, sociedad civil y comportamiento político.
• Capacidad para evaluar contenido de ciencias políticas según rúbricas detalladas e identificar problemas como simplificación excesiva, sesgo ideológico, afirmaciones no respaldadas, descripciones institucionales incorrectas, razonamiento causal engañoso o análisis comparativo débil.
• Se prefiere familiaridad con áreas como democracia y autoritarismo, economía política, administración pública, sistemas constitucionales, política electoral, estudios de conflicto, organizaciones internacionales, evaluación de políticas o investigación por encuestas.
• Se prefiere fuertemente experiencia liderando o apoyando equipos remotos de analistas, investigadores, revisores, educadores, anotadores o QAs.
• Cómodo trabajando en entornos remotos de ritmo rápido utilizando herramientas como Discord, Google Sheets, Google Docs, rastreadores, paneles de control y sistemas de gestión de proyectos.
• Altamente orientado al detalle y organizado, con la capacidad de mantener guías de estilo, preguntas frecuentes, rastreadores, materiales de incorporación, tareas de calibración y documentación.
• Experiencia con entrenamiento de IA, anotación de datos, evaluación de LLM, QA de políticas, revisión académica, verificación de hechos o revisión basada en rúbricas es una gran ventaja.