Over de functie
Over Turing
Turing is een AI-gedreven techdienstverlener met als missie de vooruitgang en inzet van AGI te versnellen door de kloof te overbruggen tussen wereldwijd talent uit 100+ landen en de beste foundational-LLM-bedrijven ter wereld, door hen te helpen hun prestaties te verbeteren via modelevaluatie, fine-tuning, feedback, feitelijke juistheid en het verwerken van diverse data.
Functieoverzicht
Een in de VS gevestigd AI-bedrijf dat voorop loopt in AI-onderzoek zoekt een Team Lead om toezicht te houden op een team van business analysts. Deze mogelijkheid is op maat gemaakt voor professionals die ervaring hebben met het leiden van teams en interesse hebben om de ontwikkeling van oplossingen aan de voorhoede van de technologie te ondersteunen.
Verantwoordelijkheden
- Door trainers ingediende evaluaties auditen op verkeerde toepassing van beleid, onvolledige redenering, scoringsdrift, schemafouten en inconsistenties in annotaties.
- Een gedetailleerd beleidskader voor AI-veiligheid consistent toepassen bij reviewtaken met hoge belangen.
- Individuele en systematische fouten in door mensen gegenereerde annotaties en schriftelijke beoordelingen identificeren.
- De volledigheid van annotaties, de nauwkeurigheid van scores, de afstemming op het beleid en de naleving van de vereiste schema's valideren.
- Directe, constructieve feedback geven aan trainers en corrigerende maatregelen aanbevelen wanneer kwaliteitsproblemen worden vastgesteld.
- Terugkerende foutpatronen documenteren en bijdragen aan initiatieven voor kwaliteitsverbetering, kalibratie en reviewertraining.
- Nauwkeurigheid en consistentie bewaren bij werken onder tijdsdruk en bij het omgaan met gevoelige content.
Functievereisten
- Scherp oog voor detail en sterke analytische en logische redeneervaardigheden.
- Aantoonbare ervaring met het identificeren van systematische fouten in door mensen gegenereerde annotaties, evaluaties of schriftelijke beoordelingen.
- Vermogen om gedetailleerde beleidsrichtlijnen snel te begrijpen en consequent toe te passen.
- Vloeiend Engels op moedertaalniveau en sterke schriftelijke communicatievaardigheden.
- Comfortabel met het geven van duidelijke, directe en constructieve feedback.
- Goed begrip van de Amerikaanse culturele context en communicatienormen.
- Vermogen om zelfstandig te werken, prioriteiten te beheren en onder tijdsdruk de kwaliteit te handhaven.
- Beschikbaarheid om zich te verbinden aan 40 uur per week; onmiddellijke beschikbaarheid heeft de voorkeur.
Gewenste kwalificaties
- Ervaring met review van AI-annotaties, Trust & Safety-kwaliteitsborging, testengineering, contentmoderatie of redactionele factchecking.
- Eerdere ervaring met schemavalidatie, reviews van beleidsnaleving, controles op de volledigheid van annotaties of kwaliteitsaudits.
- Ervaring met het werken met gevoelige content of content met hoge belangen.
Belangrijke opmerking: dit project bevat gevoelige content over onderwerpen zoals zelfbeschadiging, geweld en misbruik. Passende vrijwaringen, ondersteunende middelen en maatregelen voor welzijn zijn van toepassing.
Voordelen
- Mogelijkheid om aan baanbrekende AI-projecten te werken.
- Concurrerende beloning.
- Flexibele werktijden en een remote werkomgeving.
Sollicitatieproces
- Kandidaten op de shortlist worden benaderd.