Over de functie
Over de functie
Wat als je engineeringvaardigheden direct konden bepalen of 's werelds meest geavanceerde AI-systemen daadwerkelijk werken? We zoeken Senior Software Engineers om de evaluatie-infrastructuur te ontwerpen, bouwen en opschalen die AI-prestaties meet — de kritieke laag tussen ruwe modeloutput en vertrouwen in de echte wereld.
Dit is impactvol, technisch uitdagend werk op het snijvlak van software-engineering en AI-onderzoek. Je bouwt de tools, pipelines en frameworks die toonaangevende onderzoeksteams helpen begrijpen wat hun modellen kunnen, waar ze falen en hoe ze ze beter kunnen maken. Als je graag robuuste systemen bouwt en diep geeft om kwaliteit en meting, plaatst deze rol je in het centrum van de AI-revolutie.
- Organisatie: Alignerr
- Type: Contract per uur
- Locatie: Op afstand
- Inzet: 20–40 uur/week
---
Wat je gaat doen
- Schaalbare evaluatiepipelines en -frameworks ontwerpen en bouwen om de prestaties van AI-modellen op uiteenlopende taken en domeinen te beoordelen
- Geautomatiseerde testharnassen, scoringssystemen en benchmarkingtools ontwikkelen voor grote taalmodellen en andere AI-systemen
- Schone code van productiekwaliteit schrijven om evaluatiedatasets op schaal te verwerken, analyseren en visualiseren
- API's, dashboards en interne tools creëren en onderhouden waarmee onderzoeksteams evaluaties efficiënt kunnen uitvoeren, volgen en vergelijken
- Samenwerken met AI-onderzoekers en datawetenschappers om evaluatiemethodologieën om te zetten in betrouwbare, herhaalbare software
- Edge cases, faalmodi en betrouwbaarheidsproblemen in AI-output identificeren via systematische engineeringbenaderingen
- Systeemprestaties, verwerkingssnelheid van data en infrastructuurkosten optimaliseren
- Bijdragen aan de architectuur en technische richting van het evaluatieplatform
- Duidelijke documentatie schrijven en deelnemen aan code reviews om hoge engineeringstandaarden te waarborgen
---
Wie je bent
- 4+ jaar professionele software-engineeringervaring, met een track record van het bouwen en opleveren van productiesystemen
- Sterke beheersing van Python — inclusief ervaring met databibliotheken (pandas, NumPy) en webframeworks (FastAPI, Flask of Django)
- Solide begrip van softwarearchitectuur, ontwerppatronen en engineeringbest practices
- Ervaring met het werken met grote datasets en het bouwen van datapipelines
- Comfortabel met cloudinfrastructuur (AWS, GCP of Azure) en gecontaineriseerde deployments
- Bekendheid met versiebeheer (Git), CI/CD-workflows en testframeworks
- Sterke probleemoplossende vaardigheden en het vermogen om zelfstandig met ambiguïteit om te gaan
- Uitstekende schriftelijke communicatievaardigheden — je kunt je werk duidelijk documenteren en asynchroon samenwerken
- Zelfgemotiveerd en betrouwbaar bij zelfstandig werken in een remote omgeving
Pluspunten
- Ervaring met ML/AI-evaluatie, benchmarking of modeltesting
- Bekendheid met LLM's, prompt engineering of concepten rond AI-veiligheid en alignment
- Achtergrond in het bouwen van ontwikkelaarstools, interne platforms of datainfrastructuur
- Ervaring met gedistribueerde systemen, message queues of workfloworkestratie (Airflow, Prefect, enz.)
- Kennis van statistische methoden voor het meten en vergelijken van modelprestaties
- Eerdere ervaring in een remote-first- of async-first-engineeringcultuur
- Bijdragen aan open-sourceprojecten gerelateerd aan AI, ML of evaluatietooling
---
Waarom bij ons komen
- Werk aan geavanceerde AI-evaluatieprojecten naast onderzoekslaboratoria van wereldklasse
- Beïnvloed direct hoe AI-kwaliteit en -veiligheid op schaal worden gemeten — jouw code bepaalt de standaard
- Volledig remote en flexibel — werk wanneer en waar je het meest productief bent
- Freelance-autonomie met toegang tot diepgaand zinvol, technisch stimulerend werk
- Samenwerken met een wereldwijd team van engineers en onderzoekers die de grenzen van AI verleggen
- Blootstelling aan de nieuwste ontwikkelingen in AI-onderzoek, modelmogelijkheden en evaluatiewetenschap
- Mogelijkheid tot doorlopend werk en contractverlenging naarmate het platform en de projectomvang groeien