Informazioni sul ruolo
In questo ruolo di collaboratore a contratto, remoto e retribuito a ore, lavorerai come Esperto in Materia (SME) di Diritto e Conformità per creare domande professionali impegnative, valutare contenuti legali e normativi generati dall'IA e progettare rubriche di alta qualità che definiscano cosa dovrebbe contenere una risposta completa, ben motivata e professionalmente adeguata.
Svilupperai attività che coinvolgono analisi giuridica, interpretazione normativa, conformità, individuazione delle questioni, valutazione del rischio, interpretazione delle policy, contratti, privacy, regolamentazione finanziaria, questioni giuslavoristiche, conformità aziendale o ambiti correlati a seconda della tua specializzazione.
Valuterai se le risposte generate dall'IA individuano le questioni rilevanti, applicano regole o standard appropriati, riconoscono le eccezioni, distinguono i fatti dalle assunzioni, affrontano i rischi rilevanti ed evitano conclusioni non supportate.
Una componente importante di questo ruolo è la scrittura di rubriche e la progettazione della valutazione. Tradurrai un giudizio giuridico o normativo articolato in criteri strutturati che coprono l'individuazione delle questioni, gli standard applicabili, la qualità dell'analisi, la completezza, le eccezioni, le considerazioni giurisdizionali, il rischio e il ragionamento professionale.
Questo ruolo è presso SME Careers, un'azienda in rapida crescita nel settore dei Servizi di Dati per l'IA e controllata di SuperAnnotate, che fornisce dati di addestramento per molte delle più grandi aziende di IA e laboratori di modelli fondazionali al mondo. La tua competenza contribuisce direttamente a migliorare i principali modelli di IA al mondo rendendo i loro output legali e di conformità più accurati, rigorosi e professionalmente affidabili.
Cosa farai
- Creare attività legali e di conformità: sviluppare scenari realistici e difficili che richiedono analisi esperta e giudizio professionale.
- Progettare rubriche dettagliate: definire questioni rilevanti, regole, standard, passaggi analitici, eccezioni, rischi ed errori critici.
- Valutare analisi generate dall'IA: valutare le risposte per accuratezza, completezza, qualità del ragionamento, pertinenza e rigore professionale.
- Revisionare l'individuazione delle questioni: determinare se il modello identifica le considerazioni legali o normative materiali.
- Valutare la qualità del ragionamento: identificare conclusioni non supportate, applicazione errata delle regole, eccezioni mancanti e assunzioni errate.
- Criticare le rubriche dei colleghi: revisionare le rubriche per questioni mancanti, ambiguità, ridondanza, eccessiva soggettività o aspettative legali inesatte.
- Sviluppare contenuti di riferimento: creare analisi di alta qualità, schemi di risposta, critiche ed esempi di riferimento.
- Supportare l'addestramento dell'IA: produrre domande, rubriche, valutazioni, dati di preferenza e coppie di risposte di riferimento per i flussi di lavoro RL e SFT.
- Mantenere la qualità professionale: assicurare che i contenuti distinguano adeguatamente analisi fattuale, interpretazione giuridica, giudizio professionale e incertezza.
Cosa cerchiamo
- JD, LLB, LLM, laurea in giurisprudenza, qualifica in conformità o background professionale equivalente pertinente alla specialità indicata.
- Qualifica legale professionale o ammissione all'albo è fortemente preferita per ruoli incentrati sulla figura dell'avvocato.
- Forte competenza professionale in inglese, minimo C1.
- 3+ anni di esperienza professionale in diritto, conformità normativa, ricerca giuridica, policy, rischio, privacy, conformità finanziaria, contratti o un campo correlato.
- Comprovata competenza in un dominio legale, normativo o di conformità chiaramente definito.
- Capacità di creare scenari professionali impegnativi che richiedono individuazione delle questioni, interpretazione, analisi e giudizio.
- Forte capacità di progettare rubriche che definiscono questioni richieste, standard applicabili, passaggi di ragionamento, eccezioni rilevanti, rischi e omissioni critiche.
- Capacità di distinguere tra legittime interpretazioni giuridiche alternative e analisi oggettivamente carenti.
- A proprio agio nel revisionare e criticare rubriche sviluppate da altri esperti legali o di conformità.
- Forte attenzione ai dettagli nella valutazione di terminologia, assunzioni fattuali, giurisdizione, autorità, eccezioni, materialità e conclusioni.
- Esperienza in educazione giuridica, redazione di esami, revisione tra pari, editing legale, garanzia della qualità, redazione di policy, test di conformità o revisione supervisionata è fortemente preferita.
- Esperienza pregressa in valutazione dell'IA, IA legale, annotazione dei dati, RLHF, benchmarking di modelli o scoring basato su rubriche è preferita.