홍카나의 공부방

[Airflow] python airflow library 설치하기 본문

Data Engineering/Airflow

[Airflow] python airflow library 설치하기

홍문관카페나무 2023. 12. 16. 12:44

 

 

로컬 컴퓨터의 파이썬 가상환경에서 DAG를 개발하기 위해

필요한 라이브러리를 설치하고자 한다.

(단, Airflow는 Docker에 설치했다고 가정한다.)

 

Airflow에서는 Python 라이브러리 설치에 대한

가이드를 제공하고 있다. 아래 링크를 참고하자.

 

https://airflow.apache.org/docs/apache-airflow/stable/installation/installing-from-pypi.html

 

Installation from PyPI — Airflow Documentation

 

airflow.apache.org

 

 


 

 

참고로 단순하게 pip install로 Airflow를 설치하면

저사양의 아키텍처로 설치되어 여러 한계점이 존재한다.

그래서 Airflow는 Docker에 설치했다고 가정한다.

 

공식 예시

 

 

홈페이지에 들어가보면 아래의 pip install ~ 부분을 복사할 수 있게 되어있다.

터미널에서 파이썬 가상환경을 활성화한 뒤에, pip 설치를 진행하면 된다.

 

설치되어 있는 파이썬 가상환경의 파이썬 버전과

에어플로우 버전을 변경해서 설치해주면 된다.

 

예를 들어 airflow가 2.7.3이 아닌 2.7.2가 설치되어 있다면, 위 숫자를 변경해주면 된다.

반응형