“무엇을(What)” 정의하면 Databricks가 “어떻게(How)“를 처리해주는 선언적 파이프라인을 학습합니다. (이전 명칭: Delta Live Tables / DLT)
학습 목표
- SDP의 개념과 기존 Spark 작업 대비 장점 이해
- Streaming Tables과 Materialized Views의 차이와 사용 시나리오
- 데이터 품질 제약조건(Expectations)을 활용한 데이터 검증
- CDC(Change Data Capture) 처리와 SCD Type 2 구현