Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | ||||||
2 | 3 | 4 | 5 | 6 | 7 | 8 |
9 | 10 | 11 | 12 | 13 | 14 | 15 |
16 | 17 | 18 | 19 | 20 | 21 | 22 |
23 | 24 | 25 | 26 | 27 | 28 |
Tags
- HADOOP
- Django
- TIL
- airflow.cfg
- 운영체제
- Docker
- sql
- 데이터 엔지니어링
- TCP
- 가상환경
- 데이터베이스
- 종류
- PYTHON
- 파이썬
- 컴퓨터 네트워크
- http
- 데브코스
- dockerfile
- airflow
- 자료구조
- redshift
- Go
- 데이터엔지니어링
- 컴퓨터네트워크
- 데이터 웨어하우스
- 정리
- linux
- S3
- AWS
- 데이터 파이프라인
Archives
- Today
- Total
목록라이브러리 (1)
홍카나의 공부방

plugins 폴더에 있는 외부 모듈에서 외부 라이브러리를 import하는데 airflow에서 이를 찾을 수 없다는 오류 메시지가 나왔다. 분명 로컬 파이썬 가상환경에서 해당 라이브러리를 pip install로 설치했는데도 불구하고 인식못하는 것이다. 1. 문제 원인 > 처음 Airflow를 설치할 때 Airflow를 실행할 파이썬 환경에 해당 라이브러리가 같이 설치되지 않았다. Numpy나 Pandas와 같은 대중적인 라이브러리의 경우, Airflow 공식 이미지로 컨테이너를 설치할 때 기본적으로 같이 설치되지만 특정한 라이브러리는 그렇지 않다. 로컬에서 .env로 PYTHONPATH를 맞춰주는 등 로컬단에서의 해결 방법을 다 시도해봤는데 여전히 no module 문제가 발생한다면 Airflow의 파이..
Data Engineering/Airflow
2023. 12. 16. 18:06