Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | ||
6 | 7 | 8 | 9 | 10 | 11 | 12 |
13 | 14 | 15 | 16 | 17 | 18 | 19 |
20 | 21 | 22 | 23 | 24 | 25 | 26 |
27 | 28 | 29 | 30 |
Tags
- TCP
- Django
- linux
- 자료구조
- PYTHON
- http
- HADOOP
- airflow
- 데이터엔지니어링
- AWS
- 컴퓨터네트워크
- redshift
- 가상환경
- S3
- 파이썬
- 데이터 파이프라인
- sql
- 종류
- 정리
- 데브코스
- Docker
- TIL
- 운영체제
- 데이터베이스
- dockerfile
- 데이터 엔지니어링
- airflow.cfg
- 데이터 웨어하우스
- Go
- 컴퓨터 네트워크
Archives
- Today
- Total
목록REST API (1)
홍카나의 공부방

REST API에서 데이터를 추출하는 것은 흔한 방법이다. 다음의 간단한 패턴과 파이썬 코드 예제로 살펴본다. 패턴 API에 HTTP GET Request를 보낸다. JSON Format일 가능성이 높은 Response를 받는다. 응답을 파싱하고 추후 스토리지나 데이터베이스에 로드할 수 있는 CSV 파일로 변환한다. * 데이터를 데이터 웨어하우스에 적재하기 위해 JSON 형식으로 저장할 수도 있지만, 이 글에서는 CSV 파일을 이용하겠다. 예제 이 글에서는 Open Notify라는 API에 연결하겠다. 그중에서도 국제우주정거장(ISS)의 현 위치를 return 하는 API를 이용하겠다. http://open-notify.org/Open-Notify-API/ISS-Location-Now/ JSON 데이터는..
Data Engineering
2023. 5. 13. 17:18