Lead juridische kwaliteitsborging (QAL)

In deze rol als uurtarief-remotecontractant werk je als Lead juridische kwaliteitsborging (QAL) en houd je toezicht op kwaliteit, consistentie en de prestaties van trainers binnen juridische AI-trainingsprojecten. Je beoordeelt door AI gegenereerde juridische content en het werk van trainers/QA, evalueert de outputkwaliteit aan de hand van projectrichtlijnen, geeft nauwkeurige schriftelijke feedback en zorgt ervoor dat alle bijdragers de verwachte kwaliteitsnormen volgen.

Je beoordeelt werk op kwaliteit van juridische redenering, het signaleren van kwesties, besef van rechtsgebieden/jurisdicties, omgang met citaten en bronnen, duidelijkheid, risicobesef, opmaak, het volgen van instructies en naleving van projectspecifieke rubrics. Je signaleert terugkerende kwaliteitsproblemen, communiceert updates naar trainers en QA'ers, ondersteunt onboarding, houdt documentatie bij en helpt bijdragers te activeren die niet consistent werken. Deze rol vereist sterke juridische expertise, sterke communicatieve vaardigheden in het Engels, uitstekend oog voor detail, gestructureerde communicatie en het vermogen om kwaliteitsworkflows aan te sturen binnen remote juridische reviewteams.

Deze rol is bij SME Careers, een snelgroeiend bedrijf in AI-datadiensten en dochteronderneming van SuperAnnotate, dat trainingsdata levert aan veel van 's werelds grootste AI-bedrijven en labs voor basismodellen. Jouw leiderschap op het gebied van juridische kwaliteit helpt direct de toonaangevende AI-modellen ter wereld te verbeteren door ervoor te zorgen dat juridische trainingsdata accuraat, goed onderbouwd, duidelijk uitgelegd, gepast voorzichtig, goed gedocumenteerd en afgestemd op de verwachtingen van de klant zijn.

Het selectieproces omvat een AI-interview, een domeinspecifieke taak en een interview met een recruiter.

Belangrijk: Er is geen direct project voor deze rol; als je echter gekwalificeerd bent, behoor je tot de eerste experts die we benaderen wanneer zich relevante kansen voordoen. Dit geeft je ook toegang tot toekomstige projecten die beschikbaar komen via ons expertnetwerk.

Wat je gaat doen

• Kwaliteitsmonitoring: steekproefsgewijs juridische items controleren, kwaliteitsproblemen identificeren, doorlopend feedback geven via DM's en terugkerende of kritieke problemen escaleren.
• Juridische review: door AI gegenereerde juridische uitleg, antwoorden op juridisch onderzoek, contractanalyses, beleidsinterpretaties, zaaksamenvattingen, compliance-richtlijnen en workflows voor het signaleren van kwesties beoordelen op nauwkeurigheid, duidelijkheid en gepaste voorzichtigheid.
• Communicatie met trainers en QA: trainers en QA'ers op Discord bijpraten over nieuwe itemrichtlijnen, projectwijzigingen, workflowupdates, kwaliteitsverwachtingen en specifieke normen voor juridische review.
• Vragen afhandelen: vragen van trainers/QA'ers duidelijk en snel beantwoorden, vooral over juridische redenering, jurisdictie, citaten, bronkwaliteit, disclaimers, contracttaal, compliance-interpretatie en rubrictoepassing.
• Beheer van activering van trainers/QA'ers: bijdragers die inactief zijn of niet werken een DM sturen, aanmoedigen tot activering, follow-ups bijhouden en beschikbaarheidsproblemen signaleren wanneer nodig.
• Documentatie: juridische projectdocumentatie opstellen en bijhouden, waaronder stijlgidsen, trackers, FAQ's, kwaliteitsnotities, voorbeelden, honeypots, kalibratietaken en onboardingsmaterialen.
• Onboarding en training: onboardings-/trainingsgesprekken plannen en leiden met trainers en QA'ers om projectverwachtingen, workflows, rubrics, kwaliteitsnormen en juridische specifieke reviewvereisten uit te leggen.
• Kwaliteitsafstemming: ervoor zorgen dat alle trainers en QA'ers richtlijnen voor juridische review consistent toepassen en updates begrijpen naarmate projecten zich ontwikkelen.
• Risico- en veiligheidsreview: onveilige, misleidende, overmatig zelfverzekerde of juridisch gezien ongepaste outputs signaleren, vooral wanneer de content kan worden opgevat als gepersonaliseerd juridisch advies.
• Procesverbetering: terugkerende kwaliteitstekorten identificeren, workflowverbeteringen voorstellen en helpen schaalbare QA-processen op te bouwen voor juridische AI-trainingsprojecten.

Wat we zoeken

• Bachelor, JD, LLB, LLM of gelijkwaardige graad in Rechten, Legal Studies, Paralegal Studies, Compliance, Public Policy of een nauw verwant vakgebied.
• Sterke beheersing van de Engelse taal om projectrichtlijnen te volgen, met teams te communiceren en duidelijke feedback over juridische review in het Engels te geven.
• 3+ jaar professionele ervaring in juridische praktijk, juridisch onderzoek, contractreview, compliance, regelgevingsanalyse, paralegalwerk, juridische operations, juridisch schrijven, juridisch onderwijs of verwante workflows.
• Sterk begrip van kernjuridische concepten zoals juridische redenering, het signaleren van kwesties, contractinterpretatie, juridisch onderzoek, wetsinterpretatie, zaaksanalyse, compliance, risicobeoordeling en normen voor juridisch schrijven.
• Vermogen om juridische content te beoordelen aan de hand van gedetailleerde rubrics en problemen te identificeren zoals niet-onderbouwde conclusies, gehallucineerde citaten, mismatches in jurisdictie, overmatig zelfverzekerd juridisch advies, ontbrekende voorbehouden, onjuiste juridische normen, onvolledige redeneringen of onduidelijke uitleg.
• Bekendheid met gangbare juridische workflows of tools zoals contractreview, juridische memoranda, zaaksamenvattingen, regelgevingsrichtlijnen, citatiecontrole, juridische databases, documentreview, compliance-checklists of beleidsanalyse is een pré.
• Ervaring met het leiden of ondersteunen van remote teams van trainers, annotatoren, reviewers, advocaten, paralegals, juridisch schrijvers, onderzoekers of QA'ers is sterk gewenst.
• Je voelt je comfortabel in snel veranderende remote omgevingen met tools zoals Discord, Google Sheets, Google Docs, trackers, dashboards en projectmanagementsystemen.
• Zeer detailgericht en georganiseerd, met het vermogen om stijlgidsen, FAQ's, trackers, onboardingsmaterialen, honeypots, kalibratietaken en andere kwaliteitsdocumentatie bij te houden.
• Ervaring met AI-training, data-annotatie, grote taalmodellen, prompt-/response-evaluatie, QA van juridische content of rubricgebaseerde LLM-evaluatie is een sterk pluspunt.