BigQuery 환경설정 방법

1. 빅쿼리에서 프로젝트 만들기 

1) 프로젝트 만들기

프로젝트 선택 -> 새프로젝트 클릭

2) 프로젝트 이름 설정

프로젝트 이름은 원하는 이름으로 설정 후 -> 만들기 클릭

오른쪽 상단에 프로젝트가 만들어졌다는 알림이 나타납니다.

3) 빅쿼리 메인화면

 

---

2. BigQuery의 환경 구성 요소

① 프로젝트

: 하나의 프로젝트에 여러 데이터셋이 존재할 수 있습니다.

회사에 따라 프로젝트의 개수는 다르고, 목적에 맞는 형태로 데이터셋을 구성합니다.

 

② 데이터셋

:프로젝트에 있는 창고입니다. 우리는 각 창고 공간에 데이터를 저장할 수 있습니다.

예를 들어 판매 데이터, 고객 데이터 등 별도의 데이터를 저장할 수 있습니다.

하나의 데이터 셋에 다양한 테이블이 존재할 수 있습니다.

 

③ 테이블

: 테이블 안에는 상품의 세부 정보가 저장되어있습니다.

(테이블은 행과 열로 이루어진 데이터들이 저장)

---

3. 데이터 셋 생성

빅쿼리 -> studio -> 탐색기

탐색기 아래에 새로만든 프로젝트 bigquery-project 보이시죠. 여기 데이터셋, 테이블이 저장됩니다.

이제 데이터 셋을 만들기 위해서 데이터 세트 만들기를 클릭해주세요.

 

그럼  데이터 세트 만들기 창이 뜨고 데이터 셋ID를 정해주시면 됩니다. (나머지 설정은 건들지 않았습니다.)

이제 basic이라는 데이터 세트가 만들어졌습니다. 이 안에는 테이블을 저장할  수 있어요

테이블을 만들기 위해 basic 데이터 셋에서 테이블 만들기를 클릭해줄게요

테이블 만들기에 들어가면 아래와 같은 화면이 나타납니다.

• 테이블을 만들 소스 : 업로드
• 파일선택 : 업로드할 파일 선택
• 테이블 : 테이블 명 설정
• 스키마: 자동감지

설정을 한 후 테이블 만들기를 클릭해주세요

그럼 아래와 같이 pokemon이라는 테이블이 만들어집니다.

 

battle 테이블 특별 설정

스키마 자동감지가 아닌 텍스트로 편집하겠습니다.

파티셔닝 설정->필드로 파티션 나누기-> 필드선택

파티션 나누기 유형 : 날짜별

고급 옵션-> 건너뛸 헤더 행 1로 설정

csv 파일의 첫번째 행은 컬럼 이름이기 때문에 건너뛰기 위함입니다.

그럼 이렇게  4개의 테이블이 생성되었습니다.

여기서 battle 테이블은 파티션을 설정했기 때문에  나머지 테이블과 모양이 다른 것을 확인하실 수 있습니다. 

---

4. 쿼리 실행해보기

pokemon 테이블의 쿼리를 실행해 보겠습니다.

쿼리 실행은 돋보기 모양에 쿼리라고 써있는 걸 클릭 하거나 탭에서 + 버튼을 누르면 됩니다.

bigquery-project : 프로젝트명

basic : 데이터셋명

pokemon : 테이블명

 

데이터를 출력해 봤더니 아래와 같이 잘 출력됨을 확인할 수 있습니다.