BigQuery-tutorial
- Made by Seongyun Byeon
- Last modified date : 18.05.20
- ๊ณต์ง ์ฌํญ
- BigQuery ๊ด๋ จ ๋ฐํ๋ฅผ ํ์ต๋๋ค. ๋ฐํ ์๋ฃ๋ ์ฌ๋ผ์ด๋์์ด์ ์์ต๋๋ค :)
- ๋ฐ์ ๋ด์ฉ์ ๋ณด๋ ๊ฒ๋ณด๋ค ์ ์ฌ๋ผ์ด๋์์ด ์์ฃผ๋ก ๋ณด์๋ ๊ฒ์ ์ถ์ฒํฉ๋๋ค!!
- ์์ ์ฌํญ
- 18.05.20 : ๋ฐ์ดํฐ ๋ถ์์ ์ํ SQL ๋ ์ํผ ์๊ฐ ์ถ๊ฐ
- 19.05.23 : BigQuery ๋ฐํ ์๋ฃ ์ถ๊ฐ
Intro
- Google Cloud BigQuery๋ฅผ 6๊ฐ์๊ฐ ์ฌ์ฉํ๋ฉด์ ์ ์ด๋ ๋ด์ฉ์ ๋ฌธ์ํํด๋ดค์ต๋๋ค. ํ๊ตญ์์ ๋ง์ ๋ถ๋ค์ด BigQuery๋ฅผ ์ฌ์ฉํ๋ ๊ทธ๋ ๊น์ง..!
- ์กฐ๊ธ์ด๋ผ๋ ๋์์ด ๋์ จ์ผ๋ฉด, Star๋ฅผ ๋๋ฌ์ฃผ์๋ ๊ฒ์ ์ด๋จ๊น์?
- ํ๋ฆฐ ๋ด์ฉ์ด ๋ง์ ์ ์์ต๋๋ค. ์ด๋ค ๊ฒฝ๋ก๋ ์ฐ๋ฝ์ฃผ์๋ฉด ๋ฐ๋ก ์์ ํ๊ฒ ์ต๋๋ค
- ๊ถ๊ธํ์ ๋ด์ฉ์ ํ์ด์ค๋ถ Google BigQuery Users์์ ๋ฌผ์ด๋ณด์ ๋ ์ข์ ๊ฒ ๊ฐ์ต๋๋ค :)
Contents
Basic
01 -- Google Bigquery
- Query syntax (legacy, standard)
- Run Query
- Loading Data(from GCS)
- Firebase์ ์ฐ๋
- MySQL to BigQuery(Using Embulk)
Utils
02 -Intermediate
03 -- Work Flow Management(using Airflow)
- Optimizing Query and Controlling Costs
- UDF(User Define Function)
- DML(Data Manipulation Language)
04 - Data Analysis Practice
- ๋ฐ์ดํฐ ๋ถ์์ ๋ฐ์ดํฐ ๋ถ์์ ์ํ SQL ๋ ์ํผ ์ฑ ์ ์ถ์ฒํฉ๋๋ค!
- ์ด ์ฑ ์ SQL ๊ธฐ์ด ์ฑ ์ ์๋์ง๋ง SQL์ ํ์ฉํด ๋ฐ์ดํฐ ๋ถ์์ ํ๋ ๋ด์ฉ์ ๋ด๊ณ ์์ต๋๋ค. ์ค๋ฌด์์ ์ฌ์ฉํ๋ ํ ํฌ๋๋ค์ด ๊ฐ๋ ๋ด๊ฒจ์์ผ๋ ๊ผญ ์ฐธ๊ณ ํ์๋ฉด ์ข์ ๊ฒ ๊ฐ์ต๋๋ค!
ETC
05 -Reference
- ๊ฐ ๋ฌธ์์ ํ๋จ์ Reference๋ฅผ ์ ์ด๋์๊ณ , ์ ๊ฒ ๊ฐ๋ ฅํ๊ฒ ์๊ฐ์ ์ค ์๋ฃ๋ค์ ์๋์ ๊ฐ์ต๋๋ค
- BigQuery Document
- ์ด์ฌ๊ด๋ SlideShare