Загрузка данных в BigQuery

Введение в BigQuery

Matt Forrest

Field CTO

Способы загрузки данных

Интерфейс загрузки данных в BigQuery

Интерфейс загрузки данных в BigQuery

Интерфейс загрузки данных в BigQuery

Пример использования командной строки bq

bq load \
    dataset.table \

    gs://mybucket/mydata.csv \

    --source_format=CSV \ 
    --autodetect

¹ https://cloud.google.com/bigquery/docs/bq-command-line-tool#loading_data

Пример оператора LOAD DATA:

LOAD DATA INTO dataset.table

  FROM FILES(
    uris = ['gs://mybucket/mydata.csv']

    format='CSV',
    skip_leading_rows=1
  )

Использование LOAD DATA

Использование bq и BigQuery Studio

Можно использовать локальные данные, но размер файлов не должен превышать 100 МБ.
Применяются ограничения на загрузку данных.

¹ https://cloud.google.com/bigquery/quotas#load_jobs

Введение в BigQuery