Over de functie
In deze rol als uurtarief-remotecontractant werk je als Hoofd kwaliteitsborging geschiedenis (QAL) om toezicht te houden op kwaliteit, consistentie en prestaties van trainers binnen geschiedenisgerichte AI-trainingsprojecten. Je beoordeelt door AI gegenereerde geschiedeniscontent en het werk van trainers/QA, evalueert de outputkwaliteit aan de hand van projectrichtlijnen, geeft nauwkeurige schriftelijke feedback en zorgt ervoor dat alle bijdragers de verwachte kwaliteitsstandaarden volgen.
Je beoordeelt werk op historische nauwkeurigheid, chronologie, brongebruik, causaliteit, context, regionale en culturele nuance, kwaliteit van interpretatie, duidelijkheid, opmaak, het volgen van instructies en naleving van projectspecifieke rubrics. Je signaleert terugkerende kwaliteitsproblemen, communiceert updates naar trainers en QA'ers, ondersteunt onboarding, onderhoudt documentatie en helpt bijdragers die niet consistent werken te activeren. Deze rol vereist sterke geschiedenisexpertise, sterke communicatieve vaardigheden in het Engels, uitstekend oog voor detail, gestructureerde communicatie en het vermogen om kwaliteitsworkflows aan te sturen binnen remote expertteams.
Deze rol is bij SME Careers, een snelgroeiend AI-datadienstenbedrijf en dochteronderneming van SuperAnnotate, dat trainingsdata levert voor veel van 's werelds grootste AI-bedrijven en labs voor basismodellen. Jouw leiderschap op het gebied van geschiedeniskwaliteit helpt rechtstreeks de toonaangevende AI-modellen ter wereld te verbeteren door ervoor te zorgen dat geschiedenistrainingsdata nauwkeurig, in context geplaatst, gebalanceerd, goed uitgelegd, goed gedocumenteerd en afgestemd op de verwachtingen van de klant zijn.
Het selectieproces omvat een AI-interview, een domeinspecifieke taak en een interview met een recruiter.
Belangrijk: Er is geen direct project voor deze rol; als je echter gekwalificeerd bent, behoor je tot de eerste experts die we benaderen wanneer zich relevante mogelijkheden voordoen. Dit geeft je ook toegang tot toekomstige projecten die beschikbaar komen via ons expertnetwerk.
Wat je doet
- Kwaliteitsmonitoring: steekproefsgewijs geschiedenisitems controleren, kwaliteitsproblemen identificeren, doorlopende feedback geven via DM's en terugkerende of kritieke problemen escaleren.
- Historische beoordeling: door AI gegenereerde geschiedenisexplanaties, tijdlijnen, vergelijkingen, samenvattingen, bron gebaseerde antwoorden en redeneringen evalueren op nauwkeurigheid, context, gebalanceerdheid en duidelijkheid.
- Communicatie met trainers en QA: trainers en QA'ers op Discord bijpraten over nieuwe itemrichtlijnen, projectwijzigingen, workflowupdates, kwaliteitsverwachtingen en geschiedenisspecifieke beoordelingsstandaarden.
- Vragen afhandelen: vragen van trainers/QA'ers duidelijk en snel beantwoorden, vooral over chronologie, historische context, broninterpretatie, betwiste interpretaties, bias, regionale nuance en rubricinterpretatie.
- Beheer van activering van trainers/QA: DM'en naar bijdragers die inactief zijn of niet werken, activering aanmoedigen, follow-ups bijhouden en beschikbaarheidsproblemen signaleren wanneer nodig.
- Documentatie: documentatie voor geschiedenisprojecten creëren en onderhouden, waaronder stijlgidsen, trackers, FAQ's, kwaliteitsnotities, voorbeelden, honeypots, kalibratietaken en onboardingsmateriaal.
- Onboarding en training: onboarding-/trainingsgesprekken plannen en uitvoeren met trainers en QA'ers om projectverwachtingen, workflows, rubrics, kwaliteitsstandaarden en geschiedenisspecifieke beoordelingsvereisten uit te leggen.
- Kwaliteitsafstemming: ervoor zorgen dat alle trainers en QA'ers de richtlijnen voor historische beoordeling consistent toepassen en updates begrijpen naarmate projecten zich ontwikkelen.
- Risico- en biasbeoordeling: misleidende, overmoedige, bevooroordeelde, cultureel ongevoelige, anachronistische of slecht onderbouwde historische beweringen signaleren.
- Procesverbetering: terugkerende kwaliteitshiaten identificeren, workflowverbeteringen voorstellen en helpen bij het opbouwen van schaalbare QA-processen voor AI-trainingsprojecten op het gebied van geschiedenis.
Wat we zoeken
- Bachelor-, Master- of PhD-diploma in Geschiedenis, Klassieke studies, Gebiedsstudies, Archeologie, Politieke geschiedenis, Cultuurgeschiedenis, Internationale betrekkingen, Geesteswetenschappen of een nauw verwant vakgebied.
- Sterke beheersing van de Engelse taal om projectrichtlijnen te volgen, met teams te communiceren en duidelijke schriftelijke feedback te geven.
- 3+ jaar ervaring in historisch onderzoek, lesgeven, schrijven, redigeren, academische beoordeling, museum-/archiefwerk, curriculumontwikkeling of aanverwante geesteswetenschappelijke workflows.
- Sterk begrip van historische methoden, chronologie, primaire versus secundaire bronnen, historiografie, causaliteit, continuïteit/verandering, regionale context en op bewijs gebaseerde interpretatie.
- Vermogen om historische content te beoordelen aan de hand van gedetailleerde rubrics en problemen te identificeren zoals anachronisme, onjuiste chronologie, ongefundeerde beweringen, oversimplificatie, bevooroordeelde framing, verzonnen citaties of misleidende causale verklaringen.
- Bekendheid met een of meer historische specialisaties zoals oude geschiedenis, middeleeuwse geschiedenis, moderne geschiedenis, wereldgeschiedenis, militaire geschiedenis, intellectuele geschiedenis, sociale geschiedenis, economische geschiedenis, koloniale/postkoloniale geschiedenis of regionale geschiedenis is een pluspunt.
- Ervaring met het leiden of ondersteunen van remote teams van onderzoekers, schrijvers, beoordelaars, docenten, annotators of QA'ers is sterk gewenst.
- Comfortabel werken in snel veranderende remote omgevingen met tools zoals Discord, Google Sheets, Google Docs, trackers, dashboards en projectmanagementsystemen.
- Zeer detailgericht en georganiseerd, met het vermogen om stijlgidsen, FAQ's, trackers, onboardingsmateriaal, kalibratietaken en documentatie te onderhouden.
- Ervaring met AI-training, data-annotatie, LLM-evaluatie, academische QA, factchecking of rubricgebaseerde beoordeling is een sterk pluspunt.