Acerca del puesto
En este rol de contratista remoto por horas, trabajarás como Líder de Aseguramiento de Calidad (QAL) de Python (Generalista) para supervisar la calidad, la consistencia y el desempeño de los entrenadores en proyectos de entrenamiento de IA con Python. Revisarás código Python generado por IA y el trabajo de entrenadores/QA, evaluarás la calidad de los resultados según las pautas del proyecto, brindarás retroalimentación escrita precisa y garantizarás que los colaboradores cumplan con los estándares de calidad esperados.
Evaluarás el trabajo en cuanto a la correctitud del código, el comportamiento en tiempo de ejecución, la precisión de la depuración, la legibilidad, el mantenimiento, el rendimiento, la conciencia de seguridad, la cobertura de pruebas, el formato, el seguimiento de instrucciones y el cumplimiento de las rúbricas específicas del proyecto. Detectarás problemas recurrentes de calidad, comunicarás actualizaciones a los entrenadores y QAs, apoyarás la incorporación, mantenerás la documentación y ayudarás a activar a los colaboradores que no están trabajando de manera consistente.
Este rol es con SME Careers, una empresa de servicios de datos de IA en rápido crecimiento y subsidiaria de SuperAnnotate, que entrega datos de entrenamiento para muchas de las empresas de IA y laboratorios de modelos fundacionales más grandes del mundo. Tu liderazgo en calidad de Python ayudará directamente a mejorar los principales modelos de IA del mundo al garantizar que los datos de entrenamiento de Python sean precisos, ejecutables, idiomáticos, claramente explicados, bien documentados y alineados con las expectativas del cliente.
El proceso de selección incluye una entrevista con IA, una tarea específica del dominio y una entrevista con un reclutador.
Importante: No hay un proyecto inmediato para este rol; sin embargo, si estás calificado, estarás entre los primeros expertos a los que contactaremos cuando surjan oportunidades relevantes. Esto también te brindará acceso a futuros proyectos disponibles a través de nuestra red de expertos.
Lo que harás
- Revisar por muestreo elementos de Python, identificar problemas de calidad, brindar retroalimentación mediante mensajes directos y escalar problemas recurrentes o críticos.
- Revisar código Python generado por IA, respuestas de depuración, algoritmos, fragmentos de backend, scripts de automatización, pruebas y explicaciones.
- Actualizar a entrenadores/QAs en Discord sobre pautas, actualizaciones de flujo de trabajo y expectativas de calidad específicas de Python.
- Responder preguntas sobre sintaxis de Python, comportamiento en tiempo de ejecución, excepciones, uso de paquetes, pruebas, tipado, seguridad, rendimiento e interpretación de rúbricas.
- Enviar mensajes directos a colaboradores inactivos, fomentar la activación, hacer seguimiento y señalar problemas de disponibilidad.
- Crear y mantener documentación de Python, guías de estilo, rastreadores, preguntas frecuentes, ejemplos, honeypots y materiales de incorporación.
- Realizar llamadas de incorporación/entrenamiento para colaboradores de Python.
- Señalar recomendaciones de Python engañosas, no ejecutables, inseguras, ineficientes o no listas para producción.
- Identificar brechas recurrentes de calidad y mejorar los flujos de trabajo de QA de Python.
Lo que buscamos
- Título de Bachelor’s o Master’s en Ciencias de la Computación, Ingeniería de Software, Ciencia de Datos, Tecnología de la Información o experiencia profesional equivalente en ingeniería de software.
- Fuerte dominio del idioma inglés para seguir pautas, comunicarse con los equipos y brindar retroalimentación técnica clara.
- 3+ años de experiencia profesional en desarrollo de Python, ingeniería de backend, automatización, scripting, flujos de trabajo de datos, revisión de código, QA, enseñanza o mentoría técnica.
- Sólido entendimiento de los fundamentos de Python, como estructuras de datos, funciones, clases, módulos, excepciones, comprensiones, iteradores, generadores, decoradores, gestores de contexto, entornos virtuales, empaquetado y pruebas.
- Capacidad para evaluar contenido de Python según rúbricas e identificar problemas como lógica incorrecta, código no ejecutable, manejo deficiente de excepciones, algoritmos ineficientes, operaciones de archivos/red inseguras, API alucinadas o explicaciones incompletas.
- Se prefiere familiaridad con pytest, unittest, typing, mypy, pip, poetry, virtualenv, FastAPI, Flask, Django, requests, asyncio, pandas, SQLAlchemy, GitHub, Docker y CI/CD.
- Se prefiere encarecidamente experiencia liderando o apoyando equipos remotos de entrenadores, ingenieros, revisores, anotadores, educadores o QAs.
- Cómodo con Discord, Google Sheets, Google Docs, rastreadores, dashboards, GitHub y sistemas de gestión de proyectos.
- Altamente organizado y capaz de mantener guías de estilo, preguntas frecuentes, rastreadores, materiales de incorporación, honeypots, tareas de calibración y documentación.
- Experiencia con entrenamiento de IA, anotación de datos, evaluación de LLM, QA de código o revisión de código basada en rúbricas es una gran ventaja.