Acerca del puesto
En este rol de contratista remoto por horas, trabajarás como Líder de Aseguramiento de Calidad (QAL) de Astronomía / Astrofísica para supervisar la calidad, la consistencia y el desempeño de los entrenadores en proyectos de entrenamiento de IA en astronomía y astrofísica. Revisarás contenido de astronomía/astrofísica generado por IA y el trabajo de entrenadores/QA, evaluarás la calidad de los resultados según las pautas del proyecto, proporcionarás retroalimentación escrita precisa y garantizarás que todos los colaboradores sigan los estándares de calidad esperados.
Evaluarás el trabajo en cuanto a precisión científica, razonamiento físico, corrección matemática, calidad de la terminología, manejo de unidades, contexto observacional, claridad, formato, seguimiento de instrucciones y adherencia a las rúbricas específicas del proyecto. Detectarás problemas de calidad recurrentes, comunicarás actualizaciones a entrenadores y QAs, apoyarás la incorporación, mantenerás la documentación y ayudarás a activar a los colaboradores que no están trabajando de manera constante. Este rol requiere una sólida experiencia en astronomía/astrofísica, sólidas habilidades de comunicación en inglés, excelente atención al detalle, comunicación estructurada y la capacidad de gestionar flujos de trabajo de calidad en equipos remotos de expertos.
Este rol es con SME Careers, una empresa de servicios de datos de IA en rápido crecimiento y subsidiaria de SuperAnnotate, que proporciona datos de entrenamiento para muchas de las empresas de IA y laboratorios de modelos fundacionales más grandes del mundo. Tu liderazgo en calidad de astronomía/astrofísica ayudará directamente a mejorar los principales modelos de IA del mundo al garantizar que los datos de entrenamiento de astronomía y astrofísica sean precisos, físicamente sólidos, claramente explicados, bien documentados y alineados con las expectativas del cliente.
El proceso de selección incluye una entrevista con IA, una tarea específica del dominio y una entrevista con un reclutador.
Importante: No hay un proyecto inmediato para este rol; sin embargo, si estás calificado, estarás entre los primeros expertos a quienes contactaremos cuando surjan oportunidades relevantes. Esto también te dará acceso a futuros proyectos disponibles a través de nuestra red de expertos.
Lo que harás
- Monitoreo de calidad: Revisar por muestreo elementos de astronomía/astrofísica, identificar problemas de calidad, proporcionar retroalimentación continua mediante mensajes directos y escalar problemas recurrentes o críticos.
- Revisión científica: Evaluar explicaciones, cálculos, diagramas, interpretaciones observacionales, comparaciones y razonamiento paso a paso de astronomía/astrofísica generados por IA en cuanto a precisión y claridad.
- Comunicación con entrenadores y QA: Actualizar a entrenadores y QAs en Discord sobre nuevas pautas de elementos, cambios del proyecto, actualizaciones de flujos de trabajo, expectativas de calidad y estándares de revisión específicos de astronomía/astrofísica.
- Gestión de preguntas: Responder a las preguntas de entrenadores/QA de manera clara y oportuna, especialmente en torno a supuestos físicos, unidades, terminología astronómica, métodos observacionales, fórmulas e interpretación de rúbricas.
- Gestión de activación de entrenadores/QA: Enviar mensajes directos a colaboradores que están inactivos o no trabajando, fomentar la activación, hacer seguimiento y señalar problemas de disponibilidad cuando sea necesario.
- Documentación: Crear y mantener documentación de proyectos de astronomía/astrofísica, incluidos guías de estilo, rastreadores, preguntas frecuentes, notas de calidad, ejemplos, honeypots, tareas de calibración y materiales de incorporación.
- Incorporación y entrenamiento: Programar y realizar llamadas de incorporación/entrenamiento con entrenadores y QAs para explicar las expectativas del proyecto, flujos de trabajo, rúbricas, estándares de calidad y requisitos de revisión específicos de astronomía/astrofísica.
- Alineación de calidad: Garantizar que todos los entrenadores y QAs apliquen las pautas de revisión de astronomía/astrofísica de manera consistente y comprendan las actualizaciones a medida que evolucionan los proyectos.
- Revisión de riesgos: Señalar afirmaciones de astronomía/astrofísica engañosas, demasiado confiadas, físicamente imposibles, numéricamente incorrectas o mal fundamentadas.
- Mejora de procesos: Identificar brechas de calidad recurrentes, proponer mejoras en los flujos de trabajo y ayudar a construir procesos de QA escalables para proyectos de entrenamiento de IA en astronomía/astrofísica.
Lo que buscamos
- Título de Bachelor's, Master's o PhD en Astronomía, Astrofísica, Física, Ciencias del Espacio, Ciencias Planetarias, Cosmología o un campo estrechamente relacionado.
- Sólido dominio del idioma inglés para seguir las pautas del proyecto, comunicarse con los equipos y proporcionar retroalimentación escrita clara.
- 3+ años de experiencia en investigación de astronomía/astrofísica, enseñanza, comunicación científica, revisión académica, análisis de datos, trabajo en observatorios o flujos de trabajo científicos relacionados.
- Sólido entendimiento de mecánica celeste, evolución estelar, galaxias, cosmología, radiación electromagnética, métodos observacionales, espectroscopia, sistemas planetarios, agujeros negros e incertidumbre científica.
- Capacidad para evaluar contenido de astronomía/astrofísica según rúbricas detalladas e identificar problemas como supuestos físicos incorrectos, unidades erróneas, cálculos defectuosos, hechos alucinados, explicaciones engañosas o conclusiones demasiado simplificadas.
- Se prefiere familiaridad con herramientas o métodos como Python, conjuntos de datos astronómicos, datos de telescopios/observatorios, espectroscopia, fotometría, simulaciones, LaTeX, Jupyter notebooks o visualización científica.
- Se prefiere encarecidamente experiencia liderando o apoyando equipos remotos de investigadores, educadores, revisores, anotadores, redactores científicos o QAs.
- Cómodo trabajando en entornos remotos de ritmo rápido usando herramientas como Discord, Google Sheets, Google Docs, rastreadores, paneles de control y sistemas de gestión de proyectos.
- Altamente orientado al detalle y organizado, con la capacidad de mantener guías de estilo, preguntas frecuentes, rastreadores, materiales de incorporación, tareas de calibración y documentación.
- Experiencia con entrenamiento de IA, anotación de datos, evaluación de LLM, QA científica, revisión académica o revisión basada en rúbricas es una gran ventaja.