Acerca del puesto
Turing es una de las principales empresas de infraestructura AGI del mundo y trabaja con laboratorios de IA de vanguardia para acelerar el desarrollo de modelos mediante datos de entrenamiento de alta calidad, evaluaciones y talento de ingeniería.
Detalles de la contratación
- Dedicación requerida: Al menos 6 horas al día y un mínimo de 40 horas por semana, con 4 horas de solapamiento con el horario PST.
- Tipo de contratación: Asignación como contratista; sin cobertura médica ni permisos remunerados.
- Duración del contrato: 5 semanas; la fecha de inicio prevista es la próxima semana.
- Tipo de pago: $280 por tarea aprobada.
Sobre el puestoBuscamos expertos en Ciencias de la Vida Computacionales con sólidas habilidades de programación científica para desarrollar tareas complejas y realistas de Ciencias de la Vida Agénticas. Diseñará tareas en las que los agentes de IA deban navegar de forma independiente por datos científicos, escribir y ejecutar código, usar herramientas computacionales, resolver problemas en resultados intermedios y producir resultados finales científicamente válidos. El objetivo es evaluar si los sistemas de IA pueden realizar un trabajo científico auténtico y de varios pasos, y no simplemente responder preguntas científicas.
Responsabilidades principales
- Diseñar flujos de trabajo científicos agénticos exigentes y realistas en todas las ciencias de la vida.
- Crear tareas que requieran múltiples pasos computacionales en lugar de soluciones de un único script o de simples preguntas y respuestas.
- Desarrollar archivos de entrada realistas, conjuntos de datos científicos, instrucciones, restricciones y entregables esperados.
- Construir tareas que exijan a los agentes inspeccionar datos, seleccionar métodos adecuados, ejecutar análisis, resolver problemas y sintetizar resultados.
- Crear soluciones expertas reproducibles y verdades de referencia (ground truths) verificables de forma objetiva que se ejecuten en el entorno sandbox proporcionado.
- Diseñar criterios de calificación automatizados o semiautomatizados sólidos.
- Asegurar que las tareas midan el razonamiento y la ejecución científicos y no la memorización.
- Validar los supuestos científicos, los cálculos, el código, los resultados intermedios y las respuestas finales.
- Asegurar que las tareas sean autónomas y ejecutables en entornos computacionales controlados y aislados de la red.
- Mantener una alta calidad y un alto rendimiento y responder de forma eficaz a los comentarios de los revisores.
Cualificaciones requeridas
- Ph.D., posdoctorado o experiencia investigadora equivalente en las ciencias de la vida, con sólida experiencia demostrada en programación computacional y científica.
- Sólida experiencia en programación científica, en particular en Python.
- Experiencia en la realización de análisis científicos computacionales de varios pasos.
- Capacidad para validar de forma independiente tanto el razonamiento científico como los resultados computacionales.
Cualificaciones preferidas
- Experiencia en una o más áreas, incluidas la bioinformática, la genómica computacional, la biología de sistemas, la neurociencia computacional, la bioestadística, el descubrimiento computacional de fármacos, la bioquímica computacional, la biología estructural, la ingeniería de proteínas o la microbiología computacional.
- Experiencia con bibliotecas científicas y herramientas de línea de comandos.
- Experiencia en la creación de pipelines de investigación reproducibles.
- Capacidad para traducir flujos de trabajo de investigación auténticos en tareas acotadas y calificables de forma objetiva.