Databricks SQL – viktiga resurser

Introduktion till Databricks SQL

Kevin Barlow

Data Manager

En hjälpsam analogi

Ett träd består av många olika komponenter som tillsammans bildar en helhet

Tree System GIF

I Databricks SQL kombineras olika komponenter till en datalagerslösning

Databricks SQL Assets

Introduktion till Databricks SQL

Fråga

  • Den grundläggande "enheten" för analys i Databricks SQL
  • Kör SQL-kod mot beräkningsresurser
  • Använder ANSI SQL-standard
  • Bearbetar data från:
    • Unity Catalog
    • Delta-tabeller
    • Filer i datasjö
    • Dataströmmar
SELECT
    orderdate AS Date,
    orderpriority AS Priority
    sum(totalprice) AS TotalPrice
FROM sfdc.sales.orders
GROUP BY
    1, 2
ORDER BY
    1, 2
Introduktion till Databricks SQL

SQL Warehouse

  • Beräkningskluster dedikerat för SQL
  • Optimeringar (t.ex. Photon)
  • Enklare administration
  • Enkel skalning
  • Frågor och BI-verktyg

SQL Warehouse GIF

Introduktion till Databricks SQL

Tabeller kontra vyer

Tabeller

  • Fysiska representationer av datamängder
  • Skrivna i Delta-format
  • Läsbara och tillgängliga utanför datapipelinen
  • Kan optimera datalayout (partitionering m.m.)

Tabell i objektlagring

Introduktion till Databricks SQL

Tabeller kontra vyer

Vyer

  • Virtuella representationer av frågeresultat i Unity Catalog
  • Snabb läsprestanda
  • Förenklar efterföljande frågor
    • Källfrågan har många joins, filter m.m.
  • Inkrementell databearbetning är tillgänglig

Vydiagram

Introduktion till Databricks SQL

Visualiseringar och dashboards

Visualiseringar

  • Visuella representationer av ett frågeresultat
  • Skapas utifrån en enskild fråga

Konfigurera visualiseringar

Dashboards

  • Samling av flera visualiseringar
  • Från flera datamängder / frågeresultat

Exempeldashboard

Introduktion till Databricks SQL

Nu kör vi en övning!

Introduktion till Databricks SQL

Preparing Video For Download...