https://airflow.apache.org/docs/apache-airflow/stable/index.html
What is Airflow™? — Airflow Documentation
airflow.apache.org
Airflow는 배치 중심 워크플로를 개발, 예약 및 모니터링하기 위한 오픈 소스 플랫폼입니다.
Airflow의 확장 가능한 Python 프레임워크를 사용하면 거의 모든 기술과 연결되는 워크플로를 구축할 수 있습니다.
웹 인터페이스는 작업 흐름 상태를 관리하는 데 도움이 됩니다.
Airflow는 노트북의 단일 프로세스부터 가장 큰 워크플로를 지원하는 분산 설정까지 다양한 방식으로 배포할 수 있습니다.