Airflow란?
Airbnb가 만든 Python 기반 워크플로 오케스트레이터다. CNCF 졸업.
개념
- DAG — 작업 순서 그래프
- Operator — 실행 단위 (BashOp, PythonOp)
- Scheduler — cron/이벤트 기반
- Web UI — 실행 모니터링
대안
Dagster, Prefect (더 현대적), Argo Workflows (Kubernetes 네이티브).
Apache Airflow란?
정의
오픈소스 워크플로 오케스트레이터. DAG를 Python으로 정의. 데이터 파이프라인 스케줄링 표준.
다른 표현에어플로우
🔗 함께 보면 좋은 용어
Data 전체 →AARRR
Pirate Metrics
Dave McClure가 만든 스타트업 퍼널. Acquisition·Activation·Retention·Referral·Revenue.
A/B 유의성
통계적 유의성·검정력·샘플 크기 계산. p-value·신뢰구간·효과 크기.
Airbyte
오픈소스 ELT 도구. 300+ 커넥터로 소스 → Warehouse 동기화.
Airflow 2+
Airflow 2.x 메이저 개편. TaskFlow API·Deferrable·Dynamic DAG. 3.0에서 더 현대화.
Amplitude
제품 분석·실험 플랫폼. 행동 분석·제품 주도 성장에 특화.
Amundsen
Lyft가 오픈소스화한 데이터 발견 UI. DataHub 경쟁.