Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | ||
6 | 7 | 8 | 9 | 10 | 11 | 12 |
13 | 14 | 15 | 16 | 17 | 18 | 19 |
20 | 21 | 22 | 23 | 24 | 25 | 26 |
27 | 28 | 29 | 30 | 31 |
Tags
- 데이터엔지니어링
- PYTHON
- 파이썬
- http
- redshift
- 데이터 엔지니어링
- 가상환경
- HADOOP
- sql
- dockerfile
- 데브코스
- 데이터베이스
- 운영체제
- 종류
- airflow
- 컴퓨터네트워크
- 자료구조
- 데이터 웨어하우스
- TIL
- linux
- Go
- 데이터 파이프라인
- 컴퓨터 네트워크
- 정리
- Django
- S3
- TCP
- Docker
- airflow.cfg
- AWS
Archives
- Today
- Total
목록크롤링 (1)
홍카나의 공부방
[DE 데브코스] 04.18 TIL - 웹 스크래핑을 위한 HTTP 기초
HTTP hypertext transfer protocol은 웹 상에서 정보를 주고 받기 위한 하나의 프로토콜이다. 이미지, 동영상, 오디오, 텍스트를 포함한 Hypertext 즉, Hyperlink와 같은 링크 기반의 데이터를 주고 받기 위한 프로토콜이다. FTP, 텔넷 등이 들어있는 OSI Layer 7(응용 계층)에 속해있다. GET과 같은 request를 넣어서 서버의 정보를 얻게 된다. server에 request를 넣으면 이에 대한 response를 서버가 보내게 되는데, HTML 문서의 데이터 형태를 주고 받게 된다. 전공의 컴퓨터 네트워크 수업에서는 딱히 깊게 배우지 않는 프로토콜이다. ( 이는 컴퓨터네트워크 수업의 핵심 주제인 TCP/IP의 내용만 제대로 다뤄도 한 학기가 부족하기 때문이..
Data Engineering/프로그래머스 데브코스
2023. 4. 18. 14:52