Acerca del puesto
Descripción del proyecto
Estamos buscando Especialistas en Gobierno independientes para aportar su experiencia en un proyecto de evaluación de benchmarks de IA. A medida que los modelos de IA generan cada vez más memorandos de políticas públicas, marcos regulatorios y entregables de administración cívica de nivel profesional, su precisión depende enteramente de datos de entrenamiento sólidos y elaborados por expertos. El objetivo de este proyecto es producir de forma autónoma tareas de evaluación de alta calidad, prompts sólidos y rúbricas claras y bien estructuradas que generen datos limpios y fiables para el entrenamiento de modelos.
Entregables y alcance del proyecto
Operar de forma autónoma para diseñar marcos de evaluación complejos y proporcionar datos de entrenamiento estructurados. Los entregables esperados incluyen:
- Creación de tareas y prompts: Generar prompts realistas y de alta calidad que obliguen al modelo de IA a producir entregables complejos y de nivel profesional específicos de la administración pública, la política gubernamental y las operaciones cívicas.
- Desarrollo de rúbricas: Redactar rúbricas de evaluación claras y bien estructuradas con criterios altamente específicos, no ambiguos y fáciles de puntuar.
- Generación de datos de evaluación de benchmarks: Producir datos de entrenamiento limpios y fiables que contribuyan directamente a la evaluación y el refinamiento de modelos de IA que abordan tareas gubernamentales y regulatorias complejas.
- Aseguramiento de la calidad y verificación de hechos: Garantizar que todas las tareas y criterios de puntuación generados reflejen estándares legislativos estrictos del mundo real, protocolos burocráticos y marcos de políticas públicas.
Experiencia requerida
Para cumplir con éxito los entregables de este proyecto, los Contratistas deben poseer un conocimiento profundo del sector para elaborar escenarios profesionales realistas.
El conjunto de habilidades principales incluye:
- Experiencia profesional demostrable dentro de los sectores de administración pública, asuntos legislativos, planificación cívica o cumplimiento normativo, con un profundo entendimiento de los estándares gubernamentales, la terminología burocrática y los entregables del sector público.
- Sólidas habilidades de redacción y generación de prompts, con la capacidad de diseñar escenarios de tareas cívicas complejos y altamente realistas para la evaluación de IA.
- Dominio de la generación de rúbricas, específicamente la capacidad de crear criterios de puntuación objetivos y no ambiguos que no dejen lugar a interpretaciones subjetivas.
- Un enfoque meticuloso y orientado al detalle para la verificación de hechos en documentos de políticas, marcos legislativos y directrices cívicas, con el fin de generar datos fiables para el benchmarking de sistemas.
Ofrecemos un rango salarial de $10 a $30 por hora, con la tarifa exacta determinada tras evaluar su experiencia, conocimientos y ubicación geográfica. Los importes finales de la oferta pueden variar respecto al rango salarial indicado anteriormente. Como contratista, deberá disponer de un ordenador seguro e internet de alta velocidad; los beneficios patrocinados por la empresa, como el seguro médico y las vacaciones remuneradas (PTO), no aplican.
Tipo de contratación: Freelance / Contratista independiente
Tipo de lugar de trabajo: Remoto