Acerca del puesto
Resumen del proyecto Buscamos especialistas técnicos con experiencia en Ingeniería de Software (SWE-Bench) para auditar tareas utilizadas para entrenar y evaluar sistemas de IA. El objetivo de este proyecto es garantizar que los flujos de trabajo y las tareas de entrenamiento de IA sean técnicamente rigurosos, prácticos y altamente precisos dentro de tu área específica de especialización.
Entregables y alcance del proyecto
-
Evaluación de tareas: Evaluar si las tareas de ingeniería de software son técnicamente precisas, realistas, resolubles, reproducibles y están respaldadas por pruebas y criterios de evaluación confiables.
-
Auditoría técnica y retroalimentación: Proporcionar retroalimentación clara y procesable sobre cualquier problema de integración de código base, fallo de pruebas o error lógico identificado dentro de las tareas.
Experiencia requerida
-
Experiencia profesional demostrable y conocimiento técnico profundo en ingeniería de software (incluyendo navegación de código base complejo, desarrollo de aplicaciones del mundo real y estándares SWE-Bench). (Nota: Los candidatos serán considerados para una especialidad según su experiencia; no se requiere experiencia en otros dominios).
-
Sólidas habilidades analíticas y de resolución de problemas para probar rigurosamente, solucionar problemas y evaluar escenarios técnicos complejos.
Ofrecemos una tarifa de $60 por hora, con la tarifa exacta determinada después de evaluar tu experiencia, especialización y ubicación geográfica. Como contratista, deberás proporcionar una computadora segura e internet de alta velocidad; los beneficios patrocinados por la empresa, como seguro de salud y PTO, no aplican.
Tipo de empleo: Contrato freelance
Tipo de lugar de trabajo: Remoto