Acerca del puesto
Acerca de Turing:
Con sede en San Francisco, California, Turing es el principal acelerador de investigación del mundo para laboratorios de IA de vanguardia y un socio de confianza para empresas globales que implementan sistemas de IA avanzados. Turing apoya a sus clientes de dos maneras: primero, acelerando la investigación de vanguardia con datos de alta calidad, canales de entrenamiento avanzados y los mejores investigadores de IA especializados en programación, razonamiento, STEM, multilingüismo, multimodalidad y agentes; y segundo, aplicando esa experiencia para ayudar a las empresas a transformar la IA de una prueba de concepto en inteligencia propia, con sistemas que funcionan de forma fiable, ofrecen un impacto medible y generan resultados duraderos en la cuenta de resultados (P&L).
Descripción del puesto
Buscamos un líder estratégico de proyectos con experiencia directa en la gestión de programas de datos de ingeniería de software para modelos de IA de vanguardia.
Usted será responsable de la producción en datos de programación, RLHF o datos de preferencias, benchmarks de SWE, evaluaciones de modelos, programación agéntica, generación de código y reparación de código. Esto incluye la calibración de colaboradores, el rendimiento, la calidad, la repetición de trabajo, el costo, los plazos y la recuperación de entregas.
El puesto exige un sólido criterio técnico. Debe ser capaz de leer código y pruebas, inspeccionar los artefactos finales, identificar el trabajo no válido y tomar decisiones de aprobación o rechazo con una formación mínima.
¿Cómo es el día a día?
-
Gestionar de principio a fin programas activos de datos y evaluación de ingeniería de software.
-
Administrar la captación, la calibración, la incorporación, la capacidad de revisión y el desempeño de los colaboradores.
-
Hacer seguimiento del rendimiento, la calidad, la repetición de trabajo, los defectos, el costo y los plazos de entrega.
-
Revisar el código, las pruebas, los metadatos de las tareas y los artefactos finales para comprobar su corrección técnica.
-
Diagnosticar fallos de calidad y mejorar el diseño de las tareas, las rúbricas, las instrucciones y los procesos de revisión.
-
Liderar planes de recuperación cuando los programas se retrasen en calidad, rendimiento, costo o plazos.
-
Coordinar a ingenieros de software, revisores y líderes de equipo distribuidos.
-
Comunicar los avances, los riesgos y las acciones correctivas a los equipos de investigación y de programas del cliente.
-
Usar Python, SQL o herramientas similares para el análisis de calidad, el seguimiento de defectos y los informes operativos.
Requisitos
-
Experiencia directa en la gestión de programas de producción de datos de ingeniería de software para modelos de IA de vanguardia, preferiblemente relacionados con entrenamiento de programación, RLHF de programación, benchmarks de SWE, evaluaciones de modelos, programación agéntica, generación de código o reparación de código.
-
Responsabilidad demostrada sobre todo el sistema de producción, incluidas la captación y calibración de colaboradores, el rendimiento de las tareas, la calidad, la repetición de trabajo, la gestión de costos y la recuperación de entregas.
-
Sólido criterio de ingeniería de software, con capacidad para leer código y pruebas, inspeccionar los artefactos finales, identificar el trabajo técnico no válido y tomar decisiones de aprobación o rechazo.
-
Experiencia en la gestión de colaboradores, revisores y líderes de equipo de ingeniería de software distribuidos, manteniendo una calidad y un nivel de entrega coherentes.
-
Capacidad para hacerse cargo rápidamente de un programa activo, diagnosticar de forma independiente los problemas operativos y comunicar decisiones claras y planes de recuperación a clientes exigentes.
Ventajas de trabajar como freelance con Turing
-
Trabajar de forma remota con empresas tecnológicas y laboratorios de IA líderes a nivel mundial.
-
Opciones de colaboración flexibles según los requisitos del proyecto y la disponibilidad.
-
Oportunidad de trabajar en programas de entrenamiento, evaluación y generación de datos de IA de gran impacto.
-
Colaborar con equipos técnicos, de investigación, de operaciones y de entrega con experiencia.
-
Desarrollar experiencia en la intersección entre la ingeniería de software, la IA y las operaciones a gran escala.
Detalles de la oferta:
-
Compromiso requerido: 8 horas al día con al menos 4 hora(s) de solapamiento con el horario PST.
-
Tipo de contratación: Puesto de contratista (Nota: este puesto no incluye licencia médica ni vacaciones remuneradas).
-
Duración del contrato: 3 meses [la fecha de inicio prevista es la próxima semana].
Proceso de evaluación:
-
Entrevista con IA (~20 min)
-
Entrevista de entrega (~45 min)