Apache 에어플로우(Airflow) 시작하기 - Airflow란?, Airflow 설치 및 기본 예제

• Apache Airflow는 AirBnB에서 개발한 워크플로우 관리 도구로, 워크플로우 작성, 스케줄링, 모니터링 등을 지원하며 데이터 엔지니어링 및 MLOps 분야에서 활용됩니다.

• Airflow는 웹서버, 스케줄러, 익스큐터, 워커 등의 구성요소로 이루어져 있으며, DAG(Directed Acyclic Graph) 개념을 이용해 워크플로우를 작성합니다.

• Airflow는 DAG(Directed Acyclic Graph)를 활용하여 워크플로우를 구성하고, Task의 실행 순서와 의존성을 설정한다.

• Airflow 설치 및 실행 과정은 경로 및 환경 변수 설정, DB 초기화, 사용자 계정 생성, 웹 서버 실행 등의 단계를 거친다.