Завантаження даних у BigQuery

Вступ до BigQuery

Matt Forrest

Field CTO

Методи завантаження даних

  1. Завантаження в BigQuery Studio
  2. Використання інструментів командного рядка bq
  3. Команда SQL LOAD DATA
Вступ до BigQuery

Використання BigQuery Studio

Інтерфейс завантаження даних у BigQuery

Вступ до BigQuery

Використання BigQuery Studio

Інтерфейс завантаження даних у BigQuery

Вступ до BigQuery

Використання BigQuery Studio

Інтерфейс завантаження даних у BigQuery

Вступ до BigQuery

Використання інструментів командного рядка bq

Приклад використання командного рядка bq

bq load \
    dataset.table \

gs://mybucket/mydata.csv \
--source_format=CSV \ --autodetect
1 https://cloud.google.com/bigquery/docs/bq-command-line-tool#loading_data
Вступ до BigQuery

Використання LOAD DATA в SQL

Приклад інструкції LOAD DATA:

LOAD DATA INTO dataset.table

FROM FILES( uris = ['gs://mybucket/mydata.csv']
format='CSV', skip_leading_rows=1 )
Вступ до BigQuery

Особливості завантаження даних

Використання LOAD DATA

  1. Неможна використовувати локальні дані.
  2. Діють ліміти на завантаження.

Використання bq і BigQuery Studio

  1. Можна використовувати локальні дані, але файли мають бути до 100 MB.
  2. Діють ліміти на завантаження.
1 https://cloud.google.com/bigquery/quotas#load_jobs
Вступ до BigQuery

Давайте потренуємось!

Вступ до BigQuery

Preparing Video For Download...