Over de functie
In deze rol als uurlijkse, remote contractor werk je als Python (Generalist) Quality Assurance Lead (QAL) om kwaliteit, consistentie en de prestaties van trainers te bewaken binnen Python AI-trainingprojecten. Je beoordeelt door AI gegenereerde Python-code en het werk van trainers/QA, evalueert de outputkwaliteit aan de hand van projectrichtlijnen, geeft precieze schriftelijke feedback en zorgt ervoor dat bijdragers de verwachte kwaliteitsstandaarden volgen.
Je beoordeelt werk op codecorrectheid, runtimegedrag, nauwkeurigheid van debugging, leesbaarheid, onderhoudbaarheid, prestaties, securitybewustzijn, testdekking, formatting, het opvolgen van instructies en naleving van projectspecifieke rubrics. Je signaleert terugkerende kwaliteitsproblemen, communiceert updates naar trainers en QA's, ondersteunt onboarding, onderhoudt documentatie en helpt bijdragers te activeren die niet consistent werken.
Deze rol is bij SME Careers, een snelgroeiend AI Data Services-bedrijf en dochteronderneming van SuperAnnotate, dat trainingsdata levert aan veel van 's werelds grootste AI-bedrijven en foundation-model-labs. Jouw leiderschap op het gebied van Python-kwaliteit helpt direct de toonaangevende AI-modellen ter wereld te verbeteren door ervoor te zorgen dat Python-trainingsdata accuraat, uitvoerbaar, idiomatisch, duidelijk uitgelegd, goed gedocumenteerd en afgestemd op de verwachtingen van klanten is.
Het selectieproces omvat een AI-interview, een domeinspecifieke taak en een interview met een recruiter.
Belangrijk: Er is geen onmiddellijk project voor deze rol; als je echter gekwalificeerd bent, behoor je tot de eerste experts die we benaderen wanneer zich relevante kansen voordoen. Dit geeft je ook toegang tot toekomstige projecten die beschikbaar zijn via ons expertnetwerk.
Wat je gaat doen
- Steekproefsgewijs Python-items controleren, kwaliteitsproblemen identificeren, feedback geven via DM's en terugkerende of kritieke problemen escaleren.
- Door AI gegenereerde Python-code, debuggingreacties, algoritmen, backend-snippets, automatiseringsscripts, tests en uitleg beoordelen.
- Trainers/QA's op Discord bijpraten over richtlijnen, workflow-updates en Python-specifieke kwaliteitsverwachtingen.
- Vragen beantwoorden over Python-syntax, runtimegedrag, exceptions, pakketgebruik, testing, typing, security, prestaties en rubricinterpretatie.
- Inactieve bijdragers een DM sturen, activering aanmoedigen, follow-ups bijhouden en beschikbaarheidsproblemen melden.
- Python-documentatie, stijlgidsen, trackers, FAQ's, voorbeelden, honeypots en onboardingsmateriaal maken en onderhouden.
- Onboarding-/trainingcalls verzorgen voor Python-bijdragers.
- Misleidende, niet-uitvoerbare, onveilige, inefficiënte of niet-productieklare Python-aanbevelingen melden.
- Terugkerende kwaliteitstekorten identificeren en Python-QA-workflows verbeteren.
Wat we zoeken
- Bachelor- of masterdiploma in Computer Science, Software Engineering, Data Science, Informatietechnologie of gelijkwaardige professionele software-engineeringervaring.
- Sterke beheersing van de Engelse taal om richtlijnen te volgen, met teams te communiceren en duidelijke technische feedback te geven.
- 3+ jaar professionele ervaring in Python-ontwikkeling, backend-engineering, automatisering, scripting, dataworkflows, codereview, QA, teaching of technisch mentorschap.
- Sterk begrip van Python-fundamenten zoals datastructuren, functies, klassen, modules, exceptions, comprehensions, iterators, generators, decorators, contextmanagers, virtuele omgevingen, packaging en testing.
- Vermogen om Python-content te beoordelen aan de hand van rubrics en problemen te identificeren zoals onjuiste logica, niet-uitvoerbare code, slechte exception handling, inefficiënte algoritmen, onveilige bestands-/netwerkoperaties, gehallucineerde API's of onvolledige uitleg.
- Bekendheid met pytest, unittest, typing, mypy, pip, poetry, virtualenv, FastAPI, Flask, Django, requests, asyncio, pandas, SQLAlchemy, GitHub, Docker en CI/CD is een pluspunt.
- Ervaring met het leiden of ondersteunen van remote teams van trainers, engineers, reviewers, annotators, educators of QA's is sterk gewenst.
- Vaardig met Discord, Google Sheets, Google Docs, trackers, dashboards, GitHub en projectmanagementsystemen.
- Zeer georganiseerd en in staat om stijlgidsen, FAQ's, trackers, onboardingsmateriaal, honeypots, kalibratietaken en documentatie te onderhouden.
- Ervaring met AI-training, data-annotatie, LLM-evaluatie, code-QA of rubricgebaseerde codereview is een sterk pluspunt.