Lead di Assicurazione della Qualità Filosofica (QAL)

In questo ruolo di collaboratore remoto retribuito a ore, lavorerai come Lead di Assicurazione della Qualità Filosofica (QAL) per supervisionare qualità, coerenza e prestazioni dei trainer nei progetti di addestramento AI incentrati sulla filosofia. Esaminerai contenuti filosofici generati dall'AI e il lavoro dei trainer/QA, valuterai la qualità degli output rispetto alle linee guida del progetto, fornirai feedback scritti precisi e garantirai che tutti i contributori rispettino gli standard di qualità attesi.

Valuterai il lavoro per accuratezza concettuale, struttura argomentativa, validità logica, contesto filosofico, qualità dell'interpretazione, chiarezza, sfumature, formattazione, rispetto delle istruzioni e aderenza alle rubriche specifiche del progetto. Individuerai problemi di qualità ricorrenti, comunicherai aggiornamenti a trainer e QA, supporterai l'onboarding, manterrai la documentazione e aiuterai ad attivare i contributori che non lavorano con costanza. Questo ruolo richiede una forte competenza filosofica, solide capacità di comunicazione in inglese, eccellente attenzione ai dettagli, comunicazione strutturata e la capacità di gestire flussi di lavoro di qualità attraverso team di esperti remoti.

Questo ruolo è presso SME Careers, un'azienda in rapida crescita nel settore dei Servizi di Dati per l'AI e controllata di SuperAnnotate, che fornisce dati di addestramento per molte delle più grandi aziende di AI e laboratori di modelli fondazionali al mondo. La tua leadership nella qualità filosofica contribuirà direttamente a migliorare i principali modelli di AI al mondo garantendo che i dati di addestramento filosofici siano concettualmente precisi, logicamente solidi, ben contestualizzati, sfumati e allineati alle aspettative del cliente.

Il processo di selezione prevede un colloquio con AI, un compito specifico del dominio e un colloquio con un recruiter.

Importante: Non esiste un progetto immediato per questo ruolo; tuttavia, se qualificato, sarai tra i primi esperti che contatteremo quando si presenteranno opportunità pertinenti. Questo ti darà anche accesso a progetti futuri disponibili attraverso la nostra rete di esperti.

Cosa farai

• Monitoraggio della qualità: controlli a campione degli elementi filosofici, identificazione di problemi di qualità, feedback continuo tramite DM e escalation di problemi ricorrenti o critici.
• Revisione filosofica: valutazione di spiegazioni filosofiche, analisi argomentative, ragionamenti etici, sintesi di filosofi, problemi di logica e confronti concettuali generati dall'AI per accuratezza e rigore.
• Comunicazione con trainer e QA: aggiornamenti a trainer e QA su Discord riguardo a nuove linee guida sugli elementi, modifiche al progetto, aggiornamenti dei flussi di lavoro, aspettative di qualità e standard di revisione specifici della filosofia.
• Gestione delle domande: risposta chiara e tempestiva alle domande di trainer/QA, soprattutto su validità argomentativa, distinzioni concettuali, tradizioni filosofiche, interpretazione, etica, logica e interpretazione delle rubriche.
• Gestione dell'attivazione di trainer/QA: invio di DM ai contributori inattivi o che non lavorano, incoraggiamento all'attivazione, monitoraggio dei follow-up e segnalazione di problemi di disponibilità quando necessario.
• Documentazione: creazione e mantenimento della documentazione del progetto filosofico, inclusi guide di stile, tracker, FAQ, note di qualità, esempi, honeypot, compiti di calibrazione e materiali di onboarding.
• Onboarding e addestramento: pianificazione e conduzione di call di onboarding/addestramento con trainer e QA per spiegare aspettative del progetto, flussi di lavoro, rubriche, standard di qualità e requisiti di revisione specifici della filosofia.
• Allineamento della qualità: garanzia che tutti i trainer e QA applichino coerentemente le linee guida di revisione filosofica e comprendano gli aggiornamenti man mano che i progetti evolvono.
• Revisione di ragionamento ed etica: segnalazione di contenuti filosofici invalidi, fuorvianti, distorti, troppo sicuri, argomentati male o eticamente superficiali.
• Miglioramento dei processi: identificazione di lacune di qualità ricorrenti, proposta di miglioramenti dei flussi di lavoro e supporto nella costruzione di processi QA scalabili per progetti di addestramento AI in filosofia.

Cosa cerchiamo

• Laurea triennale, magistrale o dottorato in Filosofia, Etica, Logica, Teoria Politica, Scienze Umane, Studi Religiosi, Lettere Classiche, Scienze Cognitive o un campo strettamente correlato.
• Forte padronanza della lingua inglese per seguire le linee guida del progetto, comunicare con i team e fornire feedback scritti chiari.
• 3+ anni di esperienza in ricerca filosofica, insegnamento, scrittura, editing, revisione accademica, revisione etica, istruzione in logica o flussi di lavoro umanistici correlati.
• Forte comprensione dei metodi filosofici, della logica, dell'analisi argomentativa, dell'etica, dell'epistemologia, della metafisica, della filosofia della mente, della filosofia politica, della storia della filosofia e della chiarificazione concettuale.
• Capacità di valutare contenuti filosofici rispetto a rubriche dettagliate e identificare problemi come argomenti fantoccio, inferenze invalide, confusione concettuale, semplificazioni eccessive, affermazioni non supportate, false equivalenze o rappresentazioni errate delle posizioni dei filosofi.
• Familiarità con aree quali logica formale, filosofia morale, etica applicata, filosofia analitica, filosofia continentale, filosofia antica, filosofia politica, filosofia della scienza o etica dell'AI è preferita.
• Esperienza nella guida o nel supporto di team remoti di ricercatori, scrittori, revisori, educatori, annotatori o QA è fortemente preferita.
• Comfort nel lavorare in ambienti remoti dinamici utilizzando strumenti come Discord, Google Sheets, Google Docs, tracker, dashboard e sistemi di gestione progetti.
• Fortemente orientato ai dettagli e organizzato, con la capacità di mantenere guide di stile, FAQ, tracker, materiali di onboarding, compiti di calibrazione e documentazione.
• Esperienza con addestramento AI, annotazione dei dati, valutazione LLM, QA accademico, revisione etica o revisione basata su rubriche è un forte plus.