Elementele cheie ale Databricks SQL

Introducere în Databricks SQL

Kevin Barlow

Data Manager

Analogie utilă

Un copac este alcătuit din mai multe componente, care formează împreună întregul

GIF sistem arbore

În Databricks SQL, diferite componente se combină într-o soluție de depozit de date

Elemente Databricks SQL

Interogare

Unitatea de bază a analizei în Databricks SQL
Execută cod SQL pe un cluster de calcul
Utilizează standardul ANSI SQL
Procesează date din:
- Unity Catalog
- Tabele Delta
- Fișiere din data lake
- Fluxuri de date

SELECT
    orderdate AS Date,
    orderpriority AS Priority
    sum(totalprice) AS TotalPrice
FROM sfdc.sales.orders
GROUP BY
    1, 2
ORDER BY
    1, 2

SQL Warehouse

Cluster de calcul dedicat pentru SQL
Optimizări (ex. Photon)
Administrare simplificată
Scalare ușoară
Interogări și instrumente BI

GIF SQL Warehouse

Tabele versus vizualizări

Tabele

Reprezentări fizice ale seturilor de date
Scrise în format Delta
Accesibile în afara conductei de date
Pot optimiza structura datelor (partiționare etc.)

Tabel în Object Storage

Tabele versus vizualizări

Vizualizări

Reprezentări virtuale ale rezultatelor interogărilor în Unity Catalog
Performanță ridicată la citirea datelor
Simplifică interogările ulterioare
- Interogarea sursă conține multe join-uri, filtre etc.
Procesare incrementală a datelor disponibilă

Diagramă vizualizare

Vizualizări grafice și tablouri de bord

Vizualizări grafice

Reprezentări vizuale ale unui rezultat de interogare
Create pe baza unei singure interogări

Configurare vizualizări grafice

Tablouri de bord

Colecție de mai multe vizualizări grafice
Pe mai multe seturi de date / rezultate de interogări

Exemplu de tablou de bord

Să exersăm!

Introducere în Databricks SQL