Datenbanken

Einführung in das Data Engineering

Vincent Vankrunkelsven

Data Engineer, DataCamp

Was sind Datenbanken?

Bild einer Datenbank

{{2}}Eine üblicherweise große Sammlung von Daten, die speziell für die schnelle Suche und den schnellen Abruf organisiert ist.

Speichert Daten

Datenbanken und Dateispeicherung

MPP-Datenbanken

Bild einer Datenbank

Sehr organisiert

Dateisysteme

Bild der Datei

Weniger organisiert

Strukturierte und unstrukturierte Daten

{{1}}Strukturiert: Datenbankschema Relationale Datenbank

{{6}}Halbstrukturiert JSON

{{2}}Unstrukturiert: ohne Schema, eher wie Dateien Videos, Fotos

Bild einer Datenbank

{ "key": "value"}

Image of file

SQL und NoSQL

SQL

Tabellen

MySQL Image

PostgreSQL Image

NoSQL

Nicht-relationale Datenbanken

Redis/MongoDB Bild

SQL: Das Datenbankschema

-- Create Customer Table 
CREATE TABLE "Customer" (
  "id" SERIAL NOT NULL,
  "first_name" varchar,
  "last_name" varchar,
  PRIMARY KEY ("id")
);

-- Create Order Table 
CREATE TABLE "Order" (
  "id" SERIAL NOT NULL,
  "customer_id" integer REFERENCES "Customer",
  "product_name" varchar,
  "product_price" integer,
  PRIMARY KEY ("id")
);

Datenbankschema für Kunde und Bestellung

-- Join both tables on foreign key
SELECT * FROM "Customer"
INNER JOIN "Order"
ON "customer_id" = "Customer"."id";

 id | first_name | ... | product_price
  1 | Vincent    | ... |            10

SQL: Sternschema

{{1}}Das Sternschema besteht aus einer oder mehreren Faktentabellen, die auf beliebig viele Dimensionstabellen verweisen.

Sternschema-Diagramm von Customers und Orders

{{2}}Fakten: Dinge, die passiert sind (z. B. Produktbestellungen) {{3}}Dimensionen: Informationen über die Welt (z. B. Kundeninformationen)

¹ https://en.wikipedia.org/wiki/Star_schema

Lass uns üben!

Einführung in das Data Engineering