직무 소개
대규모 배치 및 스트리밍 아키텍처, 레이크하우스 설계, 데이터 계약, 오케스트레이션, 계보, 프로덕션 데이터 품질을 평가합니다. AI가 생성한 파이프라인의 정확성, 멱등성, 스키마 진화, 복구 동작, 관측 가능성, 비용을 고려한 확장성을 검토합니다. 프로덕션에서 드러날 약한 소유권 경계, 조용한 데이터 품질 실패, 취약한 의존성, 거버넌스 격차를 식별합니다. SQL, Spark, Kafka, dbt, Airflow 및 이에 준하는 현대 데이터 플랫폼 패턴을 사용하여 실질적인 수정을 제공합니다. 원격, 프로젝트 기반 계약 업무입니다. 범위와 시간은 프로젝트 매칭에 따라 달라지며, 명시된 시급 범위는 매칭된 업무에 적용됩니다.
우리가 찾는 사람
- 프로덕션 데이터 플랫폼 또는 분석 인프라를 구축한 7년 이상의 경력
- 고급 SQL 및 Spark, Kafka, dbt, Airflow 또는 이에 준하는 시스템에 대한 전문성
- 대규모에서 신뢰할 수 있고 관측 가능하며 거버넌스가 적용된 데이터 제품을 설계한 경험