Acerca del puesto
Acerca de Turing:
Turing es una de las empresas de IA de más rápido crecimiento del mundo, y acelera el avance y la implementación de sistemas de IA potentes.
Turing ayuda a sus clientes de dos maneras: trabajando con los principales laboratorios de IA del mundo para avanzar en las capacidades de los modelos de vanguardia en pensamiento, razonamiento, programación, comportamiento agéntico, multimodalidad, multilingüismo, STEM y conocimiento de frontera; y aprovechando ese trabajo para crear sistemas de IA del mundo real que resuelvan prioridades críticas para las empresas.
Acerca del puesto
Estamos creando un benchmark de evaluación para agentes de navegación de IA de vanguardia. Su trabajo consiste en diseñar problemas de investigación que una IA de última generación no pueda resolver, incluso con acceso completo a la web y múltiples intentos. No es un puesto de experto en la materia ni de redacción de contenidos. Es investigación de carácter indagatorio.
Partirá de un hecho verificable, trabajará hacia atrás para construir una pregunta que haga que ese hecho sea extremadamente difícil de localizar y, después, demostrará su trabajo con un rastro de evidencia completo y auditable.
Qué producirá
- Una pregunta de investigación en lenguaje natural con una respuesta breve, estable y objetivamente verificable
- Pistas, cada una verificable de forma independiente, que abarquen múltiples tipos de datos - incluidos fechas, personas, lugares, organizaciones, obras, eventos, registros y cantidades - con restricciones específicas
- Un registro de validación que muestre las búsquedas obvias que realizó y los resultados que obtuvieron
Requisitos mínimos
- Máster O >3 años de experiencia.
- Capacidad demostrada de investigación en la web abierta, incluida la localización de registros primarios y la navegación por bases de datos, archivos, registros y documentos PDF gubernamentales e institucionales
- Precisión con las fuentes. Cita páginas, tablas y secciones exactas, no solo páginas de inicio
- Soltura para investigar desde cero temas que no conoce
- Inglés escrito nativo o casi nativo
- Alta tolerancia a la documentación estructurada. El rastro de evidencia es la mayor parte del trabajo
- Experiencia en evaluación de LLM, red teaming o construcción de benchmarks
- Experiencia en uno o más de los siguientes ámbitos:
- Bibliotecología de referencia, investigación de archivos o colecciones especiales
- Periodismo de investigación o verificación profesional de datos
- OSINT, diligencia debida, KYC o investigación de carácter indagatorio
- Búsqueda de patentes, de arte previo o de descubrimiento legal
- Genealogía e investigación de registros
- Concursos de preguntas competitivos o diseño de puzzle hunts (cacerías de acertijos)
Se valorará
- Familiaridad con JSON y formatos estructurados de entrega de datos
Resumen del proyecto
- La combinación actual de tareas ofrece un potencial de ingresos estimado de aproximadamente $30 por tarea aprobada.
- Proyecto de 8 semanas
- Idealmente hasta 40 horas/semana
- Totalmente remoto | Pago en USD
- Inicio en cuanto supere con éxito la evaluación
¿Qué sigue? Envíe su solicitud y complete la evaluación requerida. Los candidatos que superen la evaluación con éxito podrán continuar con la incorporación.