Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | |||||
3 | 4 | 5 | 6 | 7 | 8 | 9 |
10 | 11 | 12 | 13 | 14 | 15 | 16 |
17 | 18 | 19 | 20 | 21 | 22 | 23 |
24 | 25 | 26 | 27 | 28 | 29 | 30 |
Tags
- 데이터 파이프라인
- Docker
- http
- 정리
- 파이썬
- 컴퓨터네트워크
- airflow
- HADOOP
- 데이터 웨어하우스
- AWS
- 데브코스
- PYTHON
- 자료구조
- dockerfile
- 데이터엔지니어링
- 컴퓨터 네트워크
- sql
- airflow.cfg
- TCP
- S3
- redshift
- 데이터베이스
- 가상환경
- Django
- Go
- TIL
- 데이터 엔지니어링
- 종류
- 운영체제
- linux
Archives
- Today
- Total
홍카나의 공부방
[Airflow] cfg에서의 Timezone 본문
airflow.cfg에는 타임존 관련 키가 2개 존재한다.
하나는 default_timezone이고, 다른 하나는 default_ui_timezone이다.
이 키를 변경하면 한국시간 KST인 UTC+09:00에 시간을 맞출 수 있게 된다.
DAG의 start_date, end_date, schedule 변수에 적힌 시간은
default_timezone에 지정된 타임존을 따른다.
그러나 DAG가 실행되는 execution_date와 기록되는 log time은
항상 UTC를 따른다. 즉, execution_date를 사용할때는 UTC와 KST를 고려하여
시간을 변환하며 이해해야 할 필요가 있다는 것이다.
현재로서는 UTC를 일관되게 사용하여 혼란을 덜어주는 것이 좋다고 판단된다.
반응형
'Data Engineering > Airflow' 카테고리의 다른 글
[Airflow] Operator, Task, Scheduler, Worker, DAG 기초 예시 (0) | 2023.11.04 |
---|---|
[Airflow] WSL에서 pip install로 Airflow를 사용하지 않는 이유 (0) | 2023.11.04 |
[Airflow] task 실패시 분석하기 (1) | 2023.06.06 |
[Airflow] Airflow.cfg 일부 살펴보기 (2) | 2023.06.06 |
[Airflow] CLI에서 Docker Airflow 로그인 (0) | 2023.06.04 |