Instrukcje języka manipulacji danymi (DML)

Wprowadzenie do BigQuery

Matt Forrest

Field CTO

Przegląd manipulacji danymi w BigQuery

INSERT: Dodawanie nowych wierszy danych.
UPDATE: Modyfikowanie istniejących wartości w wierszu.
DELETE: Usuwanie niepotrzebnych danych z tabeli.
MERGE: Instrukcja łącząca INSERT, UPDATE i DELETE w jednej instrukcji.
CREATE TABLE AS: Tworzy nową tabelę na podstawie wyników zapytania.

Zagadnienia i wydajność

W miarę możliwości należy grupować instrukcje DML zamiast wykonywać je oddzielnie
Instrukcja UPDATE wymaga warunku WHERE
Warto rozważyć użycie partycji i klastrów tabel

¹ https://cloud.google.com/bigquery/docs/reference/standard-sql/data-manipulation-language

INSERT

Dodawanie rekordów do tabel

-- Define the columns in the parentheses 
INSERT INTO customers (customer_id, name, email)

-- Each value is a row to be inserted
VALUES (1, "John Doe", "[email protected]"),
(2, "Jane Doe", "[email protected]"),
(3, "Alice Smith", "[email protected]");

UPDATE

Zmiana danych na podstawie warunku

UPDATE customers
-- Set one column for each SET statement
SET email = "[email protected]"
-- Make sure to include where otherwise all
-- rows will be updated
WHERE customer_id = 1;

UPDATE z podzapytaniami lub złączeniami

UPDATE customers c
SET c.email = e.email
FROM emails e
WHERE c.customer_id = 1;

DELETE

DELETE trwale usuwa rekordy i nie można tego cofnąć

DELETE FROM customers

-- Include WHERE to ensure only specific rows are deleted
WHERE customer_id = 3;

DELETE FROM customers c
JOIN emails e USING (customer_id)
WHERE email = '[email protected]'

MERGE

Łączy INSERT, UPDATE i DELETE w jednej operacji

-- Sets the customers table as the target
MERGE customers AS target

-- The source is set to new_customers
USING new_customers AS source

-- Matching condition
ON target.customer_id = source.customer_id

-- If the emails do not match, update the email
WHEN MATCHED AND target.email != source.email THEN
  UPDATE SET email = source.email

-- If the match is not met, insert the record
WHEN NOT MATCHED THEN
  INSERT (customer_id, name, email) VALUES 
  (source.customer_id, source.name, source.email);

CREATE TABLE

Tworzenie nowych tabel na podstawie zapytań

CREATE TABLE active_customers AS
SELECT customer_id, name, email 
FROM customers
WHERE last_active_date > DATE_SUB(CURRENT_DATE(), INTERVAL 30 DAY);

Czas na ćwiczenia!

Wprowadzenie do BigQuery