Über die Stelle
Bewerten Sie groß angelegte Batch- und Streaming-Architekturen, Lakehouse-Design, Datenverträge, Orchestrierung, Lineage und Datenqualität in der Produktion. Prüfen Sie KI-generierte Pipelines auf Korrektheit, Idempotenz, Schema-Evolution, Wiederherstellungsverhalten, Observability und kostenbewusste Skalierbarkeit. Identifizieren Sie schwache Verantwortungsgrenzen, stille Datenqualitätsfehler, fragile Abhängigkeiten und Governance-Lücken, die in der Produktion auftreten würden. Liefern Sie praktische Korrekturen mit SQL, Spark, Kafka, dbt, Airflow und vergleichbaren modernen Data-Platform-Mustern. Remote, projektbasierte Vertragsarbeit. Umfang und Stunden hängen von der Projektzuordnung ab; die angegebene Stundenspanne gilt für zugeordnete Arbeit.
Was wir suchen
- 7+ Jahre Erfahrung im Aufbau von Produktionsdatenplattformen oder Analyseinfrastruktur
- Fortgeschrittenes SQL sowie Expertise in Spark, Kafka, dbt, Airflow oder vergleichbaren Systemen
- Erfahrung im Entwurf zuverlässiger, beobachtbarer und governeter Datenprodukte im großen Maßstab