Informazioni sul ruolo
Titolo del ruolo: Esperto di settore (SME) in data science e metodologia analitica
Tipo di ruolo: Contractor
Sede: Da remoto
micro1 sta selezionando esperti di settore (SME) in data science e metodologia analitica per mettere la propria competenza al servizio di un progetto ad alto impatto di un cliente, incentrato su pipeline analitiche avanzate e modelli linguistici di grandi dimensioni (LLM). In questo ruolo applicherà la Sua competenza per contribuire ad addestrare i sistemi di IA di nuova generazione. Il Suo lavoro plasmerà il modo in cui i modelli apprendono, ragionano e si comportano, grazie a input reali e di alta qualità. Non è richiesta alcuna esperienza pregressa con l'IA: ciò che conta è la Sua conoscenza del settore.
Ambito del lavoro
- Mappare scenari di analisi su larga scala e di integrazione di pipeline su una tassonomia consolidata, attraverso le principali aree di valutazione.
- Redigere casi analitici dettagliati che riflettano modelli di implementazione autentici, tra cui triage automatizzato, arricchimento e analisi su larga scala, nonché modalità di guasto rappresentative in contesti reali.
- Valutare e classificare le risposte in base a criteri quali la gestione delle fonti, il ragionamento, la comprensione dei limiti e l'utilità pratica.
- Individuare e segnalare i casi di rifiuto eccessivo (over-refusal) da parte del modello che potrebbero ostacolare flussi di lavoro analitici legittimi o interrompere la continuità della pipeline.
- Documentare casi limite complessi e criticità metodologiche emergenti, e fornire raccomandazioni concrete per il miglioramento continuo.
- Fornire feedback scritti e orali chiari e puntuali che supportino risultati di progetto iterativi e di alta qualità.
Qualifiche preferenziali
- Esperienza comprovata nell'integrazione di LLM, come le varianti GPT per uso governativo, in pipeline di dati o analitiche complesse.
- Comprovata capacità di condurre analisi su larga scala, con comprensione delle modalità di guasto dell'automazione e delle relative metriche di valutazione.
- Esperienza comprovata di insegnamento, mentoring o leadership tecnica in data science o in discipline analitiche affini.
- Competenza nella redazione di documentazione tecnica chiara e concisa e nell'esposizione di concetti complessi con un ottimo inglese scritto.
- Esperienza nella progettazione di quadri di valutazione o sistemi di benchmark.
- La familiarità con gli ambiti analitici della difesa, dell'intelligence o governativi è molto apprezzata.
- Capacità di operare in modo efficace in ambienti di progetto distribuiti e internazionali, con vincoli minimi in materia di nulla osta di sicurezza (clearance).
Scopra di più sul nostro lavoro per il settore governativo e della difesa
Presso micro1 lavoriamo con esperti del settore governativo e della difesa per valutare le prestazioni dei modelli di IA avanzati su task reali.
Il nostro benchmark MissionReport valuta i report militari e governativi generati dall'IA, evidenziando l'importanza del giudizio esperto, dell'accuratezza e della comprensione operativa.
Maggiori informazioni: https://www.micro1.ai/benchmark/mission-report