Acerca del puesto
Acerca de Turing
Con sede en San Francisco, California, Turing es el principal acelerador de investigación del mundo para los laboratorios de IA de frontera y un socio de confianza para empresas globales que implementan sistemas de IA avanzados. Turing apoya a sus clientes de dos maneras: primero, acelerando la investigación de frontera con datos de alta calidad, canalizaciones de entrenamiento avanzadas y los mejores investigadores de IA, especializados en programación, razonamiento, STEM, multilingüismo, multimodalidad y agentes; y segundo, aplicando esa experiencia para ayudar a las empresas a transformar la IA de una prueba de concepto en inteligencia propia, con sistemas que funcionan de manera confiable, generan un impacto medible e impulsan resultados duraderos en el P&L
Descripción del puesto
Buscamos analistas de datos con experiencia (MLE Bench) para contribuir a proyectos de evaluación basados en benchmarks centrados en sistemas de aprendizaje automático del mundo real. Este puesto implica un trabajo analítico práctico con conjuntos de datos similares a los de producción, métricas y resultados de ML para ayudar a evaluar, diagnosticar y mejorar el rendimiento de sistemas de IA avanzados.
El candidato ideal se siente cómodo trabajando en la intersección del análisis de datos y el aprendizaje automático, con un sólido rigor analítico y la capacidad de trabajar con conjuntos de datos reales y flujos de trabajo de evaluación de ML.
¿Cómo es el día a día?
- Analizar conjuntos de datos estructurados y no estructurados generados por canalizaciones de entrenamiento, inferencia y evaluación de ML.
- Definir, calcular y validar las métricas utilizadas para evaluar el rendimiento y el comportamiento de los modelos.
- Investigar distribuciones de datos, resultados de modelos, modos de fallo y casos límite relevantes para las tareas de benchmark.
- Escribir y ejecutar código Python y SQL para analizar datos, crear informes y respaldar flujos de trabajo de evaluación.
- Validar la calidad, la coherencia y la corrección de los datos en conjuntos de datos y experimentos.
- Crear artefactos analíticos claros y bien documentados, y flujos de trabajo de análisis reproducibles.
- Colaborar con ingenieros de ML e investigadores para diseñar escenarios de evaluación desafiantes y realistas para MLE Bench.
Requisitos
- Mínimo de 3+ años de experiencia como analista de datos o ingeniero con enfoque en analítica.
- Sólido dominio de Python para el análisis de datos.
- Sólida experiencia con SQL y conjuntos de datos relacionales.
- Experiencia analizando resultados de ML y métricas de evaluación.
- Sólida comprensión de la estadística y del razonamiento analítico.
- Capacidad para trabajar con conjuntos de datos grandes y complejos y extraer conclusiones fiables.
- Experiencia escribiendo código analítico limpio, legible y bien documentado.
- Excelentes habilidades de comunicación oral y escrita en inglés.
Ventajas de trabajar como freelance con Turing
- Trabajo en un entorno totalmente remoto.
- Oportunidad de trabajar en proyectos de IA de vanguardia con empresas líderes en LLM.
Detalles de la oferta
- Compromisos requeridos: al menos 4 horas por día y un mínimo de 20 horas por semana, con una superposición de 4 horas con PST.
- Tipo de contratación: asignación como contratista (sin licencia médica ni remunerada)
- Duración del contrato: 3 meses (ajustable según la participación)
- Ubicación: India, Pakistán, Nigeria, Kenia, Egipto, Ghana, Bangladés, Turquía, Brasil, México
Proceso de evaluación
- Entrevista técnica con reto de programación en vivo (60 minutos)