목록데이터 엔지니어링 (24)

홍카나의 공부방

[DE 데브코스] 05.15 TIL - AWS(EC2)

클라우드 컴퓨팅 IT 자원을 인터넷을 통해 on-demand로 제공받고 사용한 만큼 비용을 지불하는 방식이다. 물리적 데이터 센터와 서버를 구입하고 유지관리하는 것보다 초기 자본/시간적 비용을 훨씬 절감할 수 있다. 클라우드 유형으로는 온프레미스, IAAS, PAAS, SAAS로 구분된다. 구분 기준은 CSP로부터 어느 서비스까지 제공받느냐에 따라 달라진다. EC2와 인스턴스 생성 AWS에서 사용할 수 있는 가상의 컴퓨터 한 대를 대여할 수 있는 서비스다. EC2에서는 여러 개의 인스턴스를 만들 수 있으며, 각각의 인스터스는 가상 컴퓨팅 환경을 의미한다. 이번 글에서는 실습을 진행한다. 크게 순서는 상관없지만, 인스턴스를 할당 받기 전에 키 페어를 받아보자 인스턴스를 할당 받기 전에 키 페어를 받아보자...
Data Engineering/프로그래머스 데브코스 2023. 5. 15. 15:55
[DE 데브코스] 05.11 TIL - SQL JOIN과 NULL 처리

JOIN이란? 여러 테이블의 공통 필드를 가지고 병합하는 데 사용하는 명령어다. 여러 테이블로 분산되어 있던 정보를 통합하는 목적으로 사용한다. 조인 방식에 따라서 어떤 레코드들이 선택되는지, 어떤 필드들이 채워지는지 달라진다. 아래 도식화된 JOIN 종류를 보면 쉽게 이해할 수 있다. 일반적으로 외래키를 조인 속성으로 사용한다. 연결하려는 테이블의 조인 속성 이름은 달라도 되나, 데이터 타입(도메인)은 일치해야 한다. 같은 이름의 속성이 서로 다른 테이블에 존재할 수 있기 때문에 속성 이름 앞에 해당 속성이 소속된 테이블의 이름을 표시한다. CROSS JOIN INNER, LEFT, RIGHT, FULL OUTER 말고도 CROSS JOIN이란 방식도 존재한다. 이는 카티션 프로덕트(Cartesian ..
Data Engineering/프로그래머스 데브코스 2023. 5. 11. 18:30
[DE 데브코스] 05.10 TIL - SQL(2)

GROUP BY와 Aggregate Function 테이블의 레코드를 그룹으로 묶어 그룹별로 다양한 정보를 계산할 수 있다. (1) 그룹핑할 필드를 하나 이상의 필드로 먼저 결정하고 (2) COUNT, SUM, AVG 등의 Aggregate 함수를 이용하여 그룹별로 연산을 진행한다. GROUP BY 1은 이름에 관계없이 첫 번째 컬럼으로 그룹화하는 것을 의미한다. (ORDER BY도 마찬가지) 아래 코드 같은 경우, SELECT 절의 첫 번째 컬럼인 mon을 기준으로 그룹핑, 정렬(오름차순)을 하겠다는 뜻. SELECT LEFT(ts, 7) AS mon, COUNT(1) AS session_count FROM raw_data.session_timestamp GROUP BY 1 ORDER BY 1; SQL..
Data Engineering/프로그래머스 데브코스 2023. 5. 10. 15:36
[DE 데브코스] 05.09 TIL - SQL

SQL Tips -- 다수의 SQL 문을 실행한다면 세미콜론으로 분리 필요 SELECT * FROM Orders; SELECT id FROM Items; -- 테이블/필드이름의 명명규칙을 정하는 것이 중요 -- 단수형 vs 복수형 User vs. Users -- _ vs. CamelCasing user_session_channel UserSessionChannel DROP TABLE table_name; -- 테이블 삭제 DELETE FROM; -- 조건에 맞는 레코드만 지움 ALTER TABLE table_name ADD COLUMN field_name field_type; -- 새 필드 이름/타입 추가 ALTER TABLE table_name RENAME old_field_name to new_fie..
Data Engineering/프로그래머스 데브코스 2023. 5. 9. 14:19
이전 Prev 1 2 3 4 5 6 Next 다음