Skip to main content

실습 개요

이 실습 시리즈는 Databricks Auto Loader (자동 로더) 를 처음부터 프로덕션 수준까지 단계적으로 익히는 4개의 실습으로 구성되어 있습니다. Auto Loader는 클라우드 스토리지(S3, ADLS, GCS, UC Volume)에 새로 도착한 파일만 자동으로 감지하고 수집 하는 Databricks의 증분 파일 수집 기능입니다. Spark Structured Streaming (구조적 스트리밍) 의 cloudFiles 소스 포맷으로 구현되어 있습니다.

실습 목차


사전 지식

이 실습을 시작하기 전에 아래 개념을 먼저 확인하세요:

실습 환경 요구 사항


빠른 시작

모든 실습에서 공통으로 사용하는 경로:

실습 완료 후 기대 역량