Informazioni sul ruolo
In questo ruolo di collaboratore remoto retribuito a ore, lavorerai come Responsabile Quality Assurance (QAL) in Neuroscienze / Scienze Cognitive per supervisionare qualità, coerenza e prestazioni dei trainer nei progetti di addestramento AI in neuroscienze e scienze cognitive. Esaminerai contenuti di neuroscienze/scienze cognitive generati dall'AI e il lavoro di trainer/QA, valuterai la qualità degli output rispetto alle linee guida del progetto, fornirai feedback scritti precisi e garantirai che tutti i contributori rispettino gli standard di qualità attesi.
Valuterai il lavoro per accuratezza scientifica, precisione concettuale, competenza nella ricerca, comprensione dei metodi sperimentali, ragionamento cervello-comportamento, cautela statistica, consapevolezza etica, chiarezza, formattazione, rispetto delle istruzioni e aderenza alle rubriche specifiche del progetto. Individuerai problemi di qualità ricorrenti, comunicherai aggiornamenti a trainer e QA, supporterai l'onboarding, manterrai la documentazione e aiuterai ad attivare i contributori che non lavorano con costanza. Questo ruolo richiede una solida competenza in neuroscienze/scienze cognitive, forti capacità di comunicazione in inglese, eccellente attenzione ai dettagli, comunicazione strutturata e la capacità di gestire flussi di lavoro di qualità in team di esperti remoti.
Questo ruolo è presso SME Careers, un'azienda in rapida crescita nel settore dei servizi di dati per l'AI e controllata di SuperAnnotate, che fornisce dati di addestramento per molte delle più grandi aziende di AI e laboratori di modelli foundation al mondo. La tua leadership di qualità in neuroscienze/scienze cognitive contribuirà direttamente a migliorare i principali modelli di AI al mondo garantendo che i dati di addestramento scientifici siano accurati, consapevoli delle evidenze, eticamente appropriati, spiegati con chiarezza e allineati alle aspettative del cliente.
Il processo di selezione prevede un colloquio con AI, un compito specifico del dominio e un colloquio con un recruiter.
Importante: Non c'è un progetto immediato per questo ruolo; tuttavia, se qualificato/a, sarai tra i primi esperti che contatteremo quando si presenteranno opportunità pertinenti. Questo ti darà anche accesso a futuri progetti disponibili tramite la nostra rete di esperti.
Cosa farai
- Monitoraggio della qualità: fare controlli a campione su elementi di neuroscienze/scienze cognitive, identificare problemi di qualità, fornire feedback continuo tramite DM e segnalare problemi ricorrenti o critici.
- Revisione scientifica: valutare spiegazioni, riassunti di ricerca, interpretazioni sperimentali, affermazioni cervello-comportamento, applicazioni di teorie cognitive e ragionamenti passo dopo passo generati dall'AI in neuroscienze/scienze cognitive per accuratezza e chiarezza.
- Comunicazione con trainer e QA: aggiornare trainer e QA su Discord riguardo a nuove linee guida sugli elementi, modifiche al progetto, aggiornamenti dei flussi di lavoro, aspettative di qualità e standard di revisione specifici di neuroscienze/scienze cognitive.
- Gestione delle domande: rispondere a domande di trainer/QA in modo chiaro e tempestivo, soprattutto su meccanismi neurali, cognizione, progettazione sperimentale, interpretazione statistica, confini etici, cautela clinica e interpretazione delle rubriche.
- Gestione dell'attivazione di trainer/QA: inviare DM ai contributori inattivi o che non lavorano, incoraggiare l'attivazione, monitorare i follow-up e segnalare problemi di disponibilità quando necessario.
- Documentazione: creare e mantenere la documentazione dei progetti di neuroscienze/scienze cognitive, incluse guide di stile, tracker, FAQ, note sulla qualità, esempi, honeypot, compiti di calibrazione e materiali di onboarding.
- Onboarding e addestramento: pianificare e condurre chiamate di onboarding/addestramento con trainer e QA per spiegare aspettative del progetto, flussi di lavoro, rubriche, standard di qualità e requisiti di revisione specifici di neuroscienze/scienze cognitive.
- Allineamento sulla qualità: garantire che tutti i trainer e i QA applichino in modo coerente le linee guida di revisione in neuroscienze/scienze cognitive e comprendano gli aggiornamenti man mano che i progetti evolvono.
- Revisione di sicurezza ed etica: segnalare affermazioni pseudoscientifiche, troppo sicure, clinicamente fuorvianti, eticamente problematiche o non supportate su cervello, cognizione, comportamento o salute mentale.
- Miglioramento dei processi: identificare lacune di qualità ricorrenti, proporre miglioramenti dei flussi di lavoro e contribuire a costruire processi QA scalabili per progetti di addestramento AI in neuroscienze/scienze cognitive.
Cosa cerchiamo
- Laurea triennale, magistrale, dottorato, MD/PhD o background professionale equivalente in Neuroscienze, Scienze Cognitive, Psicologia, Neurobiologia, Psicologia Cognitiva, Neuroscienze Computazionali, ricerca affine alla Neurologia, Biologia, Scienze Biomediche o un campo strettamente correlato.
- Forte padronanza della lingua inglese per seguire le linee guida del progetto, comunicare con i team e fornire feedback scritti chiari.
- 3+ anni di esperienza nella ricerca in neuroscienze/scienze cognitive, insegnamento, lavoro di laboratorio, revisione accademica, comunicazione scientifica, progettazione sperimentale, analisi dei dati o flussi di lavoro scientifici correlati.
- Forte comprensione dei sistemi neurali, cognizione, percezione, attenzione, memoria, apprendimento, linguaggio, processo decisionale, neuroanatomia, segnalazione neurale, metodi di ricerca e relazioni cervello-comportamento.
- Capacità di valutare contenuti di neuroscienze/scienze cognitive rispetto a rubriche dettagliate e identificare problemi come neuromiti, affermazioni eccessive, conclusioni causali non supportate, interpretazioni errate di studi, terminologia errata, pseudoscienza o implicazioni cliniche fuorvianti.
- Familiarità con strumenti o metodi come EEG, fMRI, esperimenti comportamentali, modellazione computazionale, valutazione neuropsicologica, statistica, Python/R/MATLAB, compiti cognitivi o revisione della letteratura è preferibile.
- Esperienza nella guida o nel supporto di team remoti di ricercatori, revisori, educatori, annotatori, divulgatori scientifici o QA è fortemente preferibile.
- A proprio agio in ambienti remoti dinamici utilizzando strumenti come Discord, Google Sheets, Google Docs, tracker, dashboard e sistemi di gestione progetti.
- Fortemente orientato/a ai dettagli e organizzato/a, con la capacità di mantenere guide di stile, FAQ, tracker, materiali di onboarding, compiti di calibrazione e documentazione.
- Esperienza con addestramento AI, annotazione dati, valutazione di LLM, QA scientifica, revisione accademica, revisione di contenuti di psicologia/neuroscienze o revisione basata su rubriche è un forte plus.