Acerca del puesto
Turing es una de las principales empresas de infraestructura de AGI del mundo y trabaja con laboratorios de IA de vanguardia para acelerar el desarrollo de modelos mediante datos de entrenamiento de alta calidad, evaluaciones y talento de ingeniería.
Detalles de la colaboración
- Compromiso requerido: Al menos 6 horas al día y un mínimo de 40 horas a la semana, con un solapamiento de 4 horas con el horario PST.
- Tipo de contratación: Asignación como contratista; sin licencia médica ni vacaciones remuneradas.
- Duración del contrato: 5 semanas; la fecha de inicio prevista es la próxima semana.
- Tipo de pago: $280 por tarea aprobada.
Acerca del puestoBuscamos expertos en ciencias de la vida computacionales con sólidas habilidades de programación científica para desarrollar tareas complejas y realistas para Agentic Life Sciences. Usted diseñará tareas en las que los agentes de IA deban desenvolverse de forma independiente entre datos científicos, escribir y ejecutar código, usar herramientas computacionales, resolver problemas en los resultados intermedios y producir resultados finales científicamente válidos. El objetivo es evaluar si los sistemas de IA pueden realizar un trabajo científico auténtico y de varios pasos, y no simplemente responder preguntas científicas.
Responsabilidades principales
- Diseñar flujos de trabajo científicos agénticos, desafiantes y realistas en todo el ámbito de las ciencias de la vida.
- Crear tareas que requieran varios pasos computacionales en lugar de soluciones de un solo script o de simples preguntas y respuestas.
- Desarrollar archivos de entrada realistas, conjuntos de datos científicos, instrucciones, restricciones y entregables esperados.
- Crear tareas que exijan a los agentes inspeccionar datos, seleccionar métodos adecuados, ejecutar análisis, resolver problemas y sintetizar resultados.
- Crear soluciones de expertos reproducibles y valores de referencia (ground truth) verificables de forma objetiva que se ejecuten en el entorno sandbox proporcionado.
- Diseñar criterios de evaluación automatizados o semiautomatizados sólidos.
- Garantizar que las tareas midan el razonamiento científico y la ejecución, y no la memorización.
- Validar los supuestos científicos, los cálculos, el código, los resultados intermedios y las respuestas finales.
- Garantizar que las tareas sean autónomas y ejecutables en entornos computacionales controlados y aislados de la red.
- Mantener una alta calidad y un buen ritmo de producción, respondiendo eficazmente a los comentarios de los revisores.
Cualificaciones requeridas
- Doctorado, experiencia posdoctoral o experiencia investigadora equivalente en ciencias de la vida, con una sólida experiencia demostrada en computación y programación científica.
- Sólida experiencia en programación científica, en particular en Python.
- Experiencia en la realización de análisis científicos computacionales de varios pasos.
- Capacidad para validar de forma independiente tanto el razonamiento científico como los resultados computacionales.
Cualificaciones preferidas
- Experiencia en una o más áreas, entre ellas bioinformática, genómica computacional, biología de sistemas, neurociencia computacional, bioestadística, descubrimiento computacional de fármacos, bioquímica computacional, biología estructural, ingeniería de proteínas o microbiología computacional.
- Experiencia con bibliotecas científicas y herramientas de línea de comandos.
- Experiencia en la creación de canalizaciones de investigación reproducibles.
- Capacidad para traducir flujos de trabajo de investigación auténticos en tareas acotadas y evaluables de forma objetiva.