08. 보안 제한사항 — 뭐가 되고 뭐가 안 되는지

# ❌ R 코드
%r
library(ggplot2)
# → 에러: R is not supported on serverless compute

# ❌ Scala 코드  
%scala
val df = spark.read.table("my_table")
# → 에러: Scala is not supported on serverless compute

# ❌ RDD API
rdd = sc.parallelize([1, 2, 3])
# → 에러: RDD operations are not supported

# ❌ DBFS 마운트
dbutils.fs.mount(...)
# → 에러: Mount operations are not supported on serverless

# ❌ 환경 변수
import os
os.environ["MY_VAR"] = "value"
# → 작동하지 않음 (Serverless에서 환경 변수 미지원)

# ❌ PySpark 패키지 직접 설치
%pip install pyspark
# → 세션 중단! 절대 하지 마세요

# ❌ DataFrame 캐시
df.cache()
# → Serverless에서 캐시 API 미지원

# ✅ Python 코드 실행
import pandas as pd
df = spark.sql("SELECT * FROM my_table")

# ✅ pip 패키지 설치 (PySpark 제외)
%pip install faker matplotlib seaborn plotly

# ✅ Unity Catalog Volumes 접근
df = spark.read.parquet("/Volumes/my_catalog/my_schema/my_volume/file.parquet")

# ✅ SQL 실행
%sql
SELECT * FROM lge_smart_tv.gold.daily_viewing_summary LIMIT 10

# ✅ 외부 API 호출 (노트북 코드에서)
import requests
response = requests.get("https://api.example.com/data")

내 현재 컴퓨트 환경을 확인해줘:
1. Serverless인지 Classic Cluster인지
2. Python과 SQL 실행이 가능한지 간단한 테스트 실행
3. %pip install faker가 가능한지 (PySpark 패키지는 테스트하지 마)

워크샵 사전 확인을 해줘:
1. 현재 Serverless Compute에 연결되어 있는지
2. lge_smart_tv 카탈로그에 접근 가능한지 (SHOW SCHEMAS IN lge_smart_tv)
3. bronze, silver, gold, quarantine 스키마가 모두 보이는지
4. bronze 스키마에 테이블을 생성할 수 있는 권한이 있는지 (test_table 만들고 바로 삭제)

에러 발생 시 순서:
1. 에러 메시지를 정확히 읽는다
2. "Security" 키워드가 있으면 → 이 문서의 제한사항 확인
3. "not supported on serverless" → Serverless 제한 (R, Scala, RDD 등)
4. "permission denied" → Unity Catalog 권한 문제 → 관리자에게 GRANT 요청
5. "rate limit" → 잠시 대기 (1분) 후 재시도
6. 그 외 → Genie Code에 "이 에러를 진단해줘" 요청