Informazioni sul ruolo
Panoramica del progetto Stiamo cercando specialisti tecnici esperti in Ingegneria del Software (SWE-Bench) per verificare i task utilizzati per addestrare e valutare i sistemi di AI. L'obiettivo di questo progetto è garantire che i flussi di lavoro e i task di addestramento AI siano tecnicamente rigorosi, pratici e altamente accurati nell'ambito della tua specifica area di competenza.
Risultati e ambito del progetto
-
Valutazione dei task: Valutare se i task di ingegneria del software sono tecnicamente accurati, realistici, risolvibili, riproducibili e supportati da test e criteri di valutazione affidabili.
-
Verifica tecnica e feedback: Fornire feedback chiari e attuabili su eventuali problemi di integrazione del codice, fallimenti dei test o errori di logica individuati nei task.
Competenze richieste
-
Comprovata esperienza professionale e conoscenza tecnica approfondita in ingegneria del software (inclusa la navigazione di codebase complesse, lo sviluppo di applicazioni reali e gli standard SWE-Bench). (Nota: i candidati saranno considerati per una specialità in base alla loro esperienza; non è richiesta competenza in altri domini).
-
Spiccate capacità analitiche e di problem-solving per testare, risolvere problemi e valutare rigorosamente scenari tecnici complessi.
Offriamo una retribuzione di $60 all'ora, con la tariffa esatta determinata dopo la valutazione della tua esperienza, competenza e posizione geografica. In qualità di collaboratore, dovrai disporre di un computer sicuro e di internet ad alta velocità; i benefit sponsorizzati dall'azienda come l'assicurazione sanitaria e le ferie retribuite non si applicano.
Tipo di impiego: Contratto freelance
Tipo di sede di lavoro: Da remoto