Over de functie
Beoordeel grootschalige batch- en streamingarchitecturen, lakehouse-ontwerp, datacontracten, orkestratie, lineage en productie-datakwaliteit. Controleer door AI gegenereerde pipelines op correctheid, idempotentie, schema-evolutie, herstelgedrag, observeerbaarheid en kostenefficiënte schaalbaarheid. Identificeer zwakke eigendomsgrenzen, stille datakwaliteitsfouten, kwetsbare afhankelijkheden en governance-hiaten die in productie aan het licht zouden komen. Geef praktische correcties met SQL, Spark, Kafka, dbt, Airflow en vergelijkbare moderne dataplatformpatronen. Remote, projectmatig contractwerk. Scope en uren zijn afhankelijk van projectmatching; het vermelde uurtarief is van toepassing op gematcht werk.
Wat we zoeken
- 7+ jaar ervaring met het bouwen van productie-datplatforms of analytics-infrastructuur
- Gevorderde SQL plus expertise in Spark, Kafka, dbt, Airflow of vergelijkbare systemen
- Ervaring met het ontwerpen van betrouwbare, observeerbare en governanced dataproducten op schaal