Líder de Aseguramiento de Calidad de Filosofía (QAL)

En este rol de contratista remoto por horas, trabajarás como Líder de Aseguramiento de Calidad de Filosofía (QAL) para supervisar la calidad, la consistencia y el desempeño de los entrenadores en proyectos de entrenamiento de IA centrados en filosofía. Revisarás contenido filosófico generado por IA y el trabajo de entrenadores/QA, evaluarás la calidad de los resultados según las pautas del proyecto, proporcionarás retroalimentación escrita precisa y garantizarás que todos los colaboradores cumplan con los estándares de calidad esperados.

Evaluarás el trabajo en cuanto a precisión conceptual, estructura argumentativa, validez lógica, contexto filosófico, calidad de interpretación, claridad, matices, formato, seguimiento de instrucciones y adherencia a las rúbricas específicas del proyecto. Detectarás problemas recurrentes de calidad, comunicarás actualizaciones a entrenadores y QAs, apoyarás la incorporación, mantenerás la documentación y ayudarás a activar a los colaboradores que no están trabajando de manera consistente. Este rol requiere sólida experiencia en filosofía, fuertes habilidades de comunicación en inglés, excelente atención al detalle, comunicación estructurada y la capacidad de gestionar flujos de trabajo de calidad en equipos remotos de expertos.

Este rol es con SME Careers, una empresa de Servicios de Datos de IA en rápido crecimiento y subsidiaria de SuperAnnotate, que entrega datos de entrenamiento para muchas de las empresas de IA y laboratorios de modelos fundacionales más grandes del mundo. Tu liderazgo en calidad de filosofía ayudará directamente a mejorar los mejores modelos de IA del mundo asegurando que los datos de entrenamiento de filosofía sean conceptualmente precisos, lógicamente sólidos, bien contextualizados, matizados y alineados con las expectativas del cliente.

El proceso de selección incluye una entrevista con IA, una tarea específica del dominio y una entrevista con un reclutador.

Importante: No hay un proyecto inmediato para este rol; sin embargo, si estás calificado, estarás entre los primeros expertos a quienes contactaremos cuando surjan oportunidades relevantes. Esto también te brindará acceso a futuros proyectos disponibles a través de nuestra red de expertos.

Lo que harás

• Monitoreo de calidad: Revisar por muestreo elementos de filosofía, identificar problemas de calidad, proporcionar retroalimentación continua mediante mensajes directos y escalar problemas recurrentes o críticos.
• Revisión de filosofía: Evaluar explicaciones filosóficas, análisis de argumentos, razonamiento ético, resúmenes de filósofos, problemas de lógica y comparaciones conceptuales generados por IA en cuanto a precisión y rigor.
• Comunicación con entrenadores y QA: Actualizar a entrenadores y QAs en Discord sobre nuevas pautas de elementos, cambios del proyecto, actualizaciones de flujos de trabajo, expectativas de calidad y estándares de revisión específicos de filosofía.
• Gestión de preguntas: Responder preguntas de entrenadores/QA de manera clara y oportuna, especialmente sobre validez argumentativa, distinciones conceptuales, tradiciones filosóficas, interpretación, ética, lógica e interpretación de rúbricas.
• Gestión de activación de entrenadores/QA: Enviar mensajes directos a colaboradores que están inactivos o no trabajando, fomentar la activación, hacer seguimiento y señalar problemas de disponibilidad cuando sea necesario.
• Documentación: Crear y mantener documentación de proyectos de filosofía, incluidos guías de estilo, rastreadores, preguntas frecuentes, notas de calidad, ejemplos, honeypots, tareas de calibración y materiales de incorporación.
• Incorporación y entrenamiento: Programar y realizar llamadas de incorporación/entrenamiento con entrenadores y QAs para explicar las expectativas del proyecto, los flujos de trabajo, las rúbricas, los estándares de calidad y los requisitos de revisión específicos de filosofía.
• Alineación de calidad: Garantizar que todos los entrenadores y QAs apliquen las pautas de revisión de filosofía de manera consistente y comprendan las actualizaciones a medida que evolucionan los proyectos.
• Revisión de razonamiento y ética: Señalar contenido filosófico inválido, engañoso, sesgado, demasiado confiado, mal argumentado o éticamente superficial.
• Mejora de procesos: Identificar brechas de calidad recurrentes, proponer mejoras en los flujos de trabajo y ayudar a construir procesos de QA escalables para proyectos de entrenamiento de IA en filosofía.

Lo que buscamos

• Título de Bachelor’s, Master’s o PhD en Filosofía, Ética, Lógica, Teoría Política, Humanidades, Estudios Religiosos, Clásicas, Ciencia Cognitiva o un campo estrechamente relacionado.
• Sólido dominio del idioma inglés para seguir las pautas del proyecto, comunicarse con los equipos y proporcionar retroalimentación escrita clara.
• 3+ años de experiencia en investigación filosófica, docencia, escritura, edición, revisión académica, revisión ética, instrucción en lógica o flujos de trabajo de humanidades relacionados.
• Sólido entendimiento de métodos filosóficos, lógica, análisis de argumentos, ética, epistemología, metafísica, filosofía de la mente, filosofía política, historia de la filosofía y clarificación conceptual.
• Capacidad para evaluar contenido de filosofía según rúbricas detalladas e identificar problemas como argumentos de hombre de paja, inferencias inválidas, confusión conceptual, simplificación excesiva, afirmaciones sin respaldo, falsas equivalencias o tergiversación de las visiones de los filósofos.
• Se prefiere familiaridad con áreas como lógica formal, filosofía moral, ética aplicada, filosofía analítica, filosofía continental, filosofía antigua, filosofía política, filosofía de la ciencia o ética de la IA.
• Se prefiere fuertemente experiencia liderando o apoyando equipos remotos de investigadores, escritores, revisores, educadores, anotadores o QAs.
• Cómodo trabajando en entornos remotos de ritmo rápido usando herramientas como Discord, Google Sheets, Google Docs, rastreadores, paneles y sistemas de gestión de proyectos.
• Altamente orientado al detalle y organizado, con la capacidad de mantener guías de estilo, preguntas frecuentes, rastreadores, materiales de incorporación, tareas de calibración y documentación.
• Experiencia con entrenamiento de IA, anotación de datos, evaluación de LLM, QA académico, revisión ética o revisión basada en rúbricas es una gran ventaja.