Informazioni sul ruolo
Informazioni sul ruolo
E se le tue competenze ingegneristiche potessero determinare direttamente se i sistemi di IA più avanzati al mondo stanno effettivamente funzionando? Cerchiamo Ingegneri Software Senior per progettare, costruire e scalare l'infrastruttura di valutazione che misura le prestazioni dell'IA — lo strato critico tra l'output grezzo del modello e la fiducia nel mondo reale.
Si tratta di un lavoro ad alto impatto e tecnicamente stimolante, all'incrocio tra ingegneria del software e ricerca sull'IA. Costruirai gli strumenti, le pipeline e i framework che aiutano i team di ricerca leader a capire cosa possono fare i loro modelli, dove falliscono e come migliorarli. Se ami costruire sistemi robusti e tieni profondamente alla qualità e alla misurazione, questo ruolo ti mette al centro della rivoluzione dell'IA.
- Organizzazione: Alignerr
- Tipo: Contratto orario
- Sede: Da remoto
- Impegno: 20–40 ore/settimana
---
Cosa farai
- Progettare e costruire pipeline e framework di valutazione scalabili per valutare le prestazioni dei modelli di IA su compiti e domini diversi
- Sviluppare harness di test automatizzati, sistemi di scoring e strumenti di benchmarking per modelli linguistici di grandi dimensioni e altri sistemi di IA
- Scrivere codice pulito e di qualità produttiva per elaborare, analizzare e visualizzare dataset di valutazione su larga scala
- Creare e mantenere API, dashboard e strumenti interni che consentano ai team di ricerca di eseguire, monitorare e confrontare le valutazioni in modo efficiente
- Collaborare con ricercatori sull'IA e data scientist per tradurre le metodologie di valutazione in software affidabile e ripetibile
- Identificare casi limite, modalità di errore e problemi di affidabilità negli output dell'IA attraverso approcci ingegneristici sistematici
- Ottimizzare le prestazioni del sistema, la velocità di elaborazione dei dati e i costi dell'infrastruttura
- Contribuire all'architettura e alla direzione tecnica della piattaforma di valutazione
- Scrivere documentazione chiara e partecipare alle revisioni del codice per mantenere standard ingegneristici elevati
---
Chi sei
- 4+ anni di esperienza professionale in ingegneria del software, con una comprovata esperienza nella costruzione e nel rilascio di sistemi in produzione
- Forte padronanza di Python — inclusa esperienza con librerie di elaborazione dati (pandas, NumPy) e framework web (FastAPI, Flask o Django)
- Solida comprensione dell'architettura del software, dei pattern di progettazione e delle migliori pratiche ingegneristiche
- Esperienza con grandi dataset e nella costruzione di pipeline di dati
- A proprio agio con l'infrastruttura cloud (AWS, GCP o Azure) e con i deployment containerizzati
- Familiarità con il controllo di versione (Git), i flussi di lavoro CI/CD e i framework di testing
- Forti capacità di risoluzione dei problemi e capacità di lavorare in autonomia attraverso l'ambiguità
- Eccellenti capacità di comunicazione scritta — sai documentare chiaramente il tuo lavoro e collaborare in modo asincrono
- Automotivato e affidabile quando lavori in autonomia in un ambiente remoto
Requisiti preferenziali
- Esperienza con valutazione, benchmarking o testing di modelli ML/AI
- Familiarità con LLM, prompt engineering o concetti di sicurezza e allineamento dell'IA
- Background nella costruzione di strumenti per sviluppatori, piattaforme interne o infrastrutture dati
- Esperienza con sistemi distribuiti, code di messaggi o orchestrazione di flussi di lavoro (Airflow, Prefect, ecc.)
- Conoscenza di metodi statistici per misurare e confrontare le prestazioni dei modelli
- Precedente esperienza in una cultura ingegneristica remote-first o async-first
- Contributi a progetti open source relativi a IA, ML o strumenti di valutazione
---
Perché unirti a noi
- Lavorare su progetti di valutazione dell'IA all'avanguardia insieme a laboratori di ricerca di livello mondiale
- Influenzare direttamente come vengono misurate la qualità e la sicurezza dell'IA su larga scala — il tuo codice plasma lo standard
- Completamente remoto e flessibile — lavora quando e dove sei più produttivo
- Autonomia freelance con accesso a un lavoro profondamente significativo e tecnicamente stimolante
- Collaborare con un team globale di ingegneri e ricercatori che spingono i confini dell'IA
- Esposizione agli ultimi sviluppi nella ricerca sull'IA, nelle capacità dei modelli e nella scienza della valutazione
- Possibilità di lavoro continuativo e proroga del contratto man mano che la piattaforma e l'ambito del progetto crescono