Líder de Aseguramiento de Calidad de Sociología (QAL)

En este rol de contratista remoto por horas, trabajarás como Líder de Aseguramiento de Calidad de Sociología (QAL) para supervisar la calidad, la consistencia y el desempeño de los entrenadores en proyectos de entrenamiento de IA centrados en sociología. Revisarás contenido de sociología generado por IA y el trabajo de entrenadores/QA, evaluarás la calidad de los resultados según las directrices del proyecto, proporcionarás retroalimentación escrita precisa y garantizarás que todos los colaboradores sigan los estándares de calidad esperados.

Evaluarás el trabajo en cuanto a precisión sociológica, aplicación de teoría, alfabetización en investigación, contexto social, rigor metodológico, conciencia ética, sensibilidad a los sesgos, claridad, formato, seguimiento de instrucciones y adherencia a las rúbricas específicas del proyecto. Detectarás problemas recurrentes de calidad, comunicarás actualizaciones a entrenadores y QA, apoyarás la incorporación, mantenerás la documentación y ayudarás a activar a los colaboradores que no están trabajando de manera constante. Este rol requiere una sólida experiencia en sociología, sólidas habilidades de comunicación en inglés, excelente atención al detalle, comunicación estructurada y la capacidad de gestionar flujos de trabajo de calidad en equipos remotos de expertos.

Este rol es con SME Careers, una empresa de servicios de datos de IA de rápido crecimiento y subsidiaria de SuperAnnotate, que entrega datos de entrenamiento para muchas de las empresas de IA y laboratorios de modelos fundacionales más grandes del mundo. Tu liderazgo en calidad de sociología ayudará directamente a mejorar los principales modelos de IA del mundo al garantizar que los datos de entrenamiento de sociología sean precisos, matizados, éticamente conscientes, informados por la investigación y alineados con las expectativas del cliente.

El proceso de selección incluye una entrevista con IA, una tarea específica del dominio y una entrevista con un reclutador.

Importante: No hay un proyecto inmediato para este rol; sin embargo, si estás calificado, estarás entre los primeros expertos a quienes contactaremos cuando surjan oportunidades relevantes. Esto también te brindará acceso a futuros proyectos disponibles a través de nuestra red de expertos.

Qué harás

• Monitoreo de calidad: realizar verificaciones aleatorias de elementos de sociología, identificar problemas de calidad, proporcionar retroalimentación continua a través de mensajes directos y escalar problemas recurrentes o críticos.
• Revisión de sociología: evaluar explicaciones de sociología generadas por IA, aplicaciones de teoría, resúmenes de investigación, debates sobre políticas sociales, interpretaciones demográficas y razonamientos en cuanto a precisión y matiz.
• Comunicación con entrenadores y QA: actualizar a entrenadores y QA en Discord sobre nuevas directrices de elementos, cambios del proyecto, actualizaciones de flujos de trabajo, expectativas de calidad y estándares de revisión específicos de sociología.
• Gestión de preguntas: responder a las preguntas de entrenadores/QA de manera clara y oportuna, especialmente en torno a conceptos sociológicos, teoría social, métodos de investigación, desigualdad, cultura, ética, sesgo e interpretación de rúbricas.
• Gestión de activación de entrenadores/QA: enviar mensajes directos a colaboradores que estén inactivos o no estén trabajando, fomentar la activación, hacer seguimiento y señalar problemas de disponibilidad cuando sea necesario.
• Documentación: crear y mantener documentación de proyectos de sociología, incluidos guías de estilo, rastreadores, preguntas frecuentes, notas de calidad, ejemplos, honeypots, tareas de calibración y materiales de incorporación.
• Incorporación y entrenamiento: programar y realizar llamadas de incorporación/entrenamiento con entrenadores y QA para explicar las expectativas del proyecto, los flujos de trabajo, las rúbricas, los estándares de calidad y los requisitos de revisión específicos de sociología.
• Alineación de calidad: garantizar que todos los entrenadores y QA apliquen las directrices de revisión de sociología de manera consistente y comprendan las actualizaciones a medida que evolucionan los proyectos.
• Revisión de sesgos y ética: señalar estereotipos, lenguaje estigmatizante, afirmaciones no respaldadas sobre grupos sociales, razonamiento causal débil o análisis social éticamente problemático.
• Mejora de procesos: identificar brechas recurrentes de calidad, proponer mejoras de flujos de trabajo y ayudar a construir procesos de QA escalables para proyectos de entrenamiento de IA en sociología.

Qué buscamos

• Título de Bachelor’s, Master’s o PhD en Sociología, Ciencias Sociales, Investigación Social, Demografía, Criminología, Estudios de Género, Estudios Étnicos, Políticas Públicas, Antropología o un campo estrechamente relacionado.
• Sólido dominio del idioma inglés para seguir las directrices del proyecto, comunicarse con los equipos y proporcionar retroalimentación escrita clara.
• 3+ años de experiencia en investigación sociológica, enseñanza, análisis de políticas sociales, investigación cualitativa/cuantitativa, escritura académica, revisión de ciencias sociales, investigación comunitaria o flujos de trabajo relacionados.
• Sólida comprensión de teoría sociológica, instituciones sociales, desigualdad, estratificación, raza/etnicidad, género, clase, cultura, desviación, organizaciones, cambio social, demografía y métodos de investigación.
• Capacidad para evaluar contenido de sociología según rúbricas detalladas e identificar problemas como generalizaciones no respaldadas, estereotipos, fallas metodológicas, afirmaciones causales débiles, sobresimplificación, encuadres sesgados o uso inexacto de conceptos sociológicos.
• Se prefiere familiaridad con áreas como investigación por encuestas, entrevistas, etnografía, análisis estadístico, políticas sociales, sociología urbana, sociología de la familia, educación, disparidades en salud, trabajo/organizaciones o criminología.
• Se prefiere fuertemente experiencia liderando o apoyando equipos remotos de investigadores, educadores, analistas, revisores, anotadores o QA.
• Cómodo trabajando en entornos remotos de ritmo rápido utilizando herramientas como Discord, Google Sheets, Google Docs, rastreadores, paneles y sistemas de gestión de proyectos.
• Muy orientado al detalle y organizado, con la capacidad de mantener guías de estilo, preguntas frecuentes, rastreadores, materiales de incorporación, tareas de calibración y documentación.
• Experiencia con entrenamiento de IA, anotación de datos, evaluación de LLM, QA de ciencias sociales, revisión académica o revisión basada en rúbricas es una gran ventaja.