Delta Lake란?
Databricks가 2019년 오픈소스화한 Lake 테이블 포맷이다.
특징
- ACID on Parquet + JSON 트랜잭션 로그
- Databricks에 최적화
- Unity Catalog 거버넌스 통합
Iceberg 경쟁
2024년 기준 Iceberg가 더 중립 진영 지지. Delta Lake는 Databricks 종속성이 강점·단점.
Delta Lake란?
정의
Databricks가 주도하는 Lake 테이블 포맷. ACID, Time Travel, Spark 최적화.
다른 표현델타 레이크
📘 관련 기술노트
전체 보기 →🔗 함께 보면 좋은 용어
Data 전체 →데이터 관측성 플랫폼
Monte Carlo·Bigeye·Soda·Datafold·Elementary.
데이터 레이크 파일 포맷
Parquet·ORC·Avro·Arrow. 사용 시나리오별 선택.
임베딩 모델 선택
OpenAI·Cohere·BGE·ko-sroberta 등.
데이터 품질 프레임워크
Great Expectations·Soda·dbt tests·Elementary.
벡터 검색 벤치마크
ANN Benchmarks·VectorDBBench·BEIR.
모던 데이터 스택 2026
Snowflake·Databricks·Fabric·BigQuery 중심의 2026년 현황.