이 문서는 Databricks 아키텍처 의 심화 편입니다.
데이터 흐름의 전체 그림
지금까지 배운 내용을 종합하여, Databricks에서 데이터가 흘러가는 전체 과정을 살펴보겠습니다.
출처: Databricks Docs
Control Plane 내부 구성 요소 심화
Control Plane은 단순한 웹 서버가 아니라, 여러 마이크로서비스 로 구성된 복합 시스템입니다. Principal SA 수준에서 이 내부 구조를 이해하면 장애 대응과 아키텍처 설계에 큰 도움이 됩니다.Control Plane 마이크로서비스 아키텍처
Control Plane의 데이터 저장
💡 중요 포인트: Control Plane에는 고객의 비즈니스 데이터가 저장되지 않습니다. 다만 다음과 같은 메타데이터는 Control Plane에 존재합니다.
⚠️ 보안 주의: 노트북에 비밀번호나 API 키를 하드코딩하면 Control Plane에 저장됩니다. 반드시 Databricks Secrets 를 사용하세요.
정리
다음 문서에서는 실제로 Databricks Workspace에 접속하여 UI를 둘러보는 방법 을 안내해 드리겠습니다.