Over de functie
In deze uurlijkse, remote opdrachtnemersrol werk je als Kwaliteitsborgingslead Sociologie (QAL) om kwaliteit, consistentie en prestaties van trainers te bewaken binnen sociologiegerichte AI-trainingsprojecten. Je beoordeelt door AI gegenereerde sociologiecontent en het werk van trainers/QA, evalueert de outputkwaliteit aan de hand van projectrichtlijnen, geeft precieze schriftelijke feedback en zorgt dat alle bijdragers de verwachte kwaliteitsstandaarden volgen.
Je beoordeelt werk op sociologische accuratesse, toepassing van theorie, onderzoeksvaardigheid, sociale context, methodologische rigor, ethisch bewustzijn, gevoeligheid voor bias, helderheid, opmaak, instructieopvolging en naleving van projectspecifieke rubrics. Je signaleert terugkerende kwaliteitsproblemen, communiceert updates naar trainers en QA's, ondersteunt onboarding, onderhoudt documentatie en helpt bijdragers activeren die niet consistent werken. Deze rol vereist sterke sociologische expertise, sterke Engelse communicatieve vaardigheden, uitstekend oog voor detail, gestructureerde communicatie en het vermogen om kwaliteitsworkflows aan te sturen binnen remote expertteams.
Deze rol is bij SME Careers, een snelgroeiend AI Data Services-bedrijf en dochteronderneming van SuperAnnotate, dat trainingsdata levert aan vele van 's werelds grootste AI-bedrijven en foundation-model-labs. Jouw kwaliteitsleiderschap in sociologie helpt direct om 's werelds toonaangevende AI-modellen te verbeteren door te zorgen dat sociologische trainingsdata accuraat, genuanceerd, ethisch bewust, onderzoeksgeïnformeerd en afgestemd op klantverwachtingen is.
Het selectieproces omvat een AI-interview, een domeinspecifieke taak en een interview met een recruiter.
Belangrijk: Er is momenteel geen project voor deze rol; als je echter gekwalificeerd bent, behoor je tot de eerste experts die we benaderen wanneer relevante kansen zich voordoen. Dit geeft je ook toegang tot toekomstige projecten die beschikbaar komen via ons expertennetwerk.
Wat je gaat doen
- Kwaliteitsmonitoring: steekproefsgewijs sociologie-items controleren, kwaliteitsproblemen identificeren, doorlopende feedback geven via DM's en terugkerende of kritieke problemen escaleren.
- Sociologie-review: door AI gegenereerde sociologische uitleg, toepassingen van theorie, onderzoekssamenvattingen, discussies over sociaal beleid, demografische interpretaties en redeneringen beoordelen op accuratesse en nuance.
- Communicatie met trainers en QA: trainers en QA's op Discord bijpraten over nieuwe itemrichtlijnen, projectwijzigingen, workflowupdates, kwaliteitsverwachtingen en sociologiespecifieke reviewstandaarden.
- Vraagafhandeling: vragen van trainers/QA's duidelijk en snel beantwoorden, vooral rond sociologische concepten, sociale theorie, onderzoeksmethoden, ongelijkheid, cultuur, ethiek, bias en rubricinterpretatie.
- Activeringsbeheer van trainers/QA: bijdragers die inactief zijn of niet werken een DM sturen, activering aanmoedigen, follow-ups bijhouden en beschikbaarheidsproblemen signaleren wanneer nodig.
- Documentatie: sociologieprojectdocumentatie creëren en onderhouden, inclusief stijlgidsen, trackers, FAQ's, kwaliteitsnotities, voorbeelden, honeypots, kalibratietaken en onboardingsmaterialen.
- Onboarding en training: onboardings-/traininggesprekken met trainers en QA's plannen en leiden om projectverwachtingen, workflows, rubrics, kwaliteitsstandaarden en sociologiespecifieke reviewvereisten toe te lichten.
- Kwaliteitsafstemming: zorgen dat alle trainers en QA's de sociologiereviewrichtlijnen consistent toepassen en updates begrijpen naarmate projecten zich ontwikkelen.
- Bias- en ethiekreview: stereotypering, stigmatiserend taalgebruik, ongefundeerde beweringen over sociale groepen, zwakke causale redeneringen of ethisch problematische sociale analyses signaleren.
- Procesverbetering: terugkerende kwaliteitstekorten identificeren, workflowverbeteringen voorstellen en helpen bij het opbouwen van schaalbare QA-processen voor sociologie-AI-trainingsprojecten.
Wat we zoeken
- Bachelor-, Master- of PhD-diploma in Sociologie, Sociale Wetenschappen, Sociaal Onderzoek, Demografie, Criminologie, Genderstudies, Etnische Studies, Publiek Beleid, Antropologie of een nauw verwant vakgebied.
- Sterke beheersing van de Engelse taal om projectrichtlijnen te volgen, met teams te communiceren en duidelijke schriftelijke feedback te geven.
- 3+ jaar ervaring in sociologisch onderzoek, onderwijs, analyse van sociaal beleid, kwalitatief/kwantitatief onderzoek, academisch schrijven, review van sociale wetenschappen, gemeenschapsonderzoek of verwante workflows.
- Sterk begrip van sociologische theorie, sociale instituties, ongelijkheid, stratificatie, ras/etniciteit, gender, klasse, cultuur, deviantie, organisaties, sociale verandering, demografie en onderzoeksmethoden.
- Vermogen om sociologiecontent te beoordelen aan de hand van gedetailleerde rubrics en problemen te identificeren zoals ongefundeerde generalisaties, stereotypering, methodologische gebreken, zwakke causale beweringen, oversimplificatie, bevooroordeelde framing of onjuist gebruik van sociologische concepten.
- Bekendheid met gebieden zoals surveyonderzoek, interviews, etnografie, statistische analyse, sociaal beleid, stedelijke sociologie, gezinssociologie, onderwijs, gezondheidsverschillen, werk/organisaties of criminologie is een pluspunt.
- Ervaring met het leiden of ondersteunen van remote teams van onderzoekers, docenten, analisten, reviewers, annotatoren of QA's is sterk gewenst.
- Comfortabel werken in snel veranderende remote omgevingen met tools zoals Discord, Google Sheets, Google Docs, trackers, dashboards en projectmanagementsystemen.
- Sterk detailgericht en georganiseerd, met het vermogen om stijlgidsen, FAQ's, trackers, onboardingsmaterialen, kalibratietaken en documentatie te onderhouden.
- Ervaring met AI-training, data-annotatie, LLM-evaluatie, QA in sociale wetenschappen, academische review of rubricgebaseerde review is een sterk pluspunt.