Бази даних

Вступ до Data Engineering

Vincent Vankrunkelsven

Data Engineer, DataCamp

Що таке бази даних?

Зображення бази даних

Зазвичай велика колекція даних, організована для швидкого пошуку й отримання.

Зберігає дані
Організує дані
Отримання/пошук через DBMS

Бази даних і файлове сховище

Бази даних

Зображення бази даних

Дуже впорядковані
Функції на кшталт пошуку, реплікації тощо

Файлові системи

Зображення файла

Менш впорядковані
Простіші, менше додаткових функцій

Структуровані й неструктуровані дані

Структуровані: схема бази даних

Реляційна база даних

Напівструктуровані

JSON

Неструктуровані: без схеми, більше схожі на файли

Відео, фото

Зображення бази даних

{ "key": "value"}

Зображення файла

SQL і NoSQL

SQL

Таблиці
Схема бази даних
Реляційні бази даних

Зображення MySQL

Зображення PostgreSQL

NoSQL

Нереляційні бази даних
Структуровані або неструктуровані
Ключ-значення (напр., кешування)
Документні БД (напр., об'єкти JSON)

Зображення Redis/MongoDB

SQL: Схема бази даних

-- Створення таблиці Customer 
CREATE TABLE "Customer" (
  "id" SERIAL NOT NULL,
  "first_name" varchar,
  "last_name" varchar,
  PRIMARY KEY ("id")
);

-- Створення таблиці Order 
CREATE TABLE "Order" (
  "id" SERIAL NOT NULL,
  "customer_id" integer REFERENCES "Customer",
  "product_name" varchar,
  "product_price" integer,
  PRIMARY KEY ("id")
);

Схема бази даних для Customer та Order

-- Об'єднати обидві таблиці за зовнішнім ключем
SELECT * FROM "Customer"
INNER JOIN "Order"
ON "customer_id" = "Customer"."id";

 id | first_name | ... | product_price
  1 | Vincent    | ... |            10

SQL: Зіркова схема

Зіркова схема складається з однієї чи кількох факт-таблиць, що посилаються на будь-яку кількість таблиць вимірів.

Діаграма зіркової схеми для Customers і Orders

Факти: події, що сталися (напр., замовлення товарів)
Виміри: довідкова інформація (напр., дані про клієнтів)

¹ https://en.wikipedia.org/wiki/Star_schema

Давайте потренуємось!

Вступ до Data Engineering