목록data pipelines with apache airflow (1)

TITEDIOS Dev Note

[MLOps] 8강 - Airflow 둘러보기 (Airflow Multi-Node System 구축 가이드 및 사례)

목차Docker Compose로 Airflow 실행해 보기Airflow tutorial 확인해 보기Airflow architecture결론Apache Airflow는 워크플로우를 작성, 스케줄링, 모니터링할 수 있는 도구로, 데이터 파이프라인 자동화에 널리 사용됩니다. 이번 글에서는 Docker Compose를 이용하여 Airflow를 실행해 보고, 기본 튜토리얼과 아키텍처를 살펴본 후 결론을 정리하겠습니다.1. Docker Compose로 Airflow 실행하기Airflow를 손쉽게 실행하려면 Docker Compose를 사용하는 방법이 유용합니다. 공식적으로 제공되는 docker-compose.yaml 파일을 사용하면 다양한 컴포넌트를 간단히 구성할 수 있습니다. 지난 글까지 Docker를 설치하고 ..
MLOps 2025. 1. 10. 19:00
이전 Prev 1 Next 다음