Over de functie
Over Turing
Turing is gevestigd in San Francisco, Californië, en is 's werelds toonaangevende onderzoeksversneller voor frontier-AI-labs en een vertrouwde partner voor wereldwijde ondernemingen die geavanceerde AI-systemen inzetten. Turing ondersteunt klanten op twee manieren: ten eerste door frontieronderzoek te versnellen met hoogwaardige data, geavanceerde trainingspipelines en topresearchers op het gebied van AI die gespecialiseerd zijn in coderen, redeneren, STEM, meertaligheid, multimodaliteit en agents; en ten tweede door die expertise toe te passen om ondernemingen te helpen AI te laten uitgroeien van proof of concept tot eigen intelligentie, met systemen die betrouwbaar presteren, meetbare impact leveren en duurzame resultaten opleveren op de P&L
Overzicht van de functie
Wij zoeken ervaren Data Analysts (MLE Bench) die willen bijdragen aan op benchmarks gebaseerde evaluatieprojecten gericht op machine learning-systemen uit de praktijk. Deze rol omvat praktisch analytisch werk met productieachtige datasets, metrics en ML-output om de prestaties van geavanceerde AI-systemen te helpen evalueren, diagnosticeren en verbeteren.
De ideale kandidaat voelt zich thuis op het snijvlak van data-analyse en machine learning, met sterke analytische nauwkeurigheid en het vermogen om met echte datasets en ML-evaluatieworkflows te werken.
Hoe ziet uw dagelijkse werk eruit?
- Gestructureerde en ongestructureerde datasets analyseren die voortkomen uit ML-training-, inferentie- en evaluatiepipelines.
- Metrics definiëren, berekenen en valideren die worden gebruikt om modelprestaties en -gedrag te evalueren.
- Datadistributies, modeloutput, faalmodi en randgevallen onderzoeken die relevant zijn voor benchmarktaken.
- Python- en SQL-code schrijven en uitvoeren om data te analyseren, rapporten te maken en evaluatieworkflows te ondersteunen.
- Datakwaliteit, consistentie en juistheid valideren over datasets en experimenten heen.
- Duidelijke, goed gedocumenteerde analytische artefacten en reproduceerbare analyseworkflows creëren.
- Samenwerken met ML-engineers en onderzoekers om uitdagende evaluatiescenario's uit de praktijk voor MLE Bench te ontwerpen.
Vereisten
- Minimaal 3+ jaar ervaring als Data Analyst of Analytics-gerichte Engineer.
- Zeer goede beheersing van Python voor data-analyse.
- Gedegen ervaring met SQL en relationele datasets.
- Ervaring met het analyseren van ML-output en evaluatiemetrics.
- Sterk begrip van statistiek en analytisch redeneren.
- Vermogen om te werken met grote, complexe datasets en betrouwbare inzichten te halen.
- Ervaring met het schrijven van schone, leesbare en goed gedocumenteerde analytische code.
- Uitstekende mondelinge en schriftelijke communicatieve vaardigheden in het Engels.
Voordelen van freelancen bij Turing
- Werken in een volledig remote omgeving.
- Mogelijkheid om te werken aan geavanceerde AI-projecten met toonaangevende LLM-bedrijven.
Details van het aanbod
- Vereiste inzet: Ten minste 4 uur per dag en minimaal 20 uur per week, met 4 uur overlap met PST.
- Type samenwerking: Opdracht als contractor (geen medisch/betaald verlof)
- Looptijd van het contract: 3 maanden (aanpasbaar op basis van de inzet)
- Locatie: India, Pakistan, Nigeria, Kenia, Egypte, Ghana, Bangladesh, Turkije, Brazilië, Mexico
Evaluatieproces
- Technisch interview met live codeeropdracht (60 minuten)