Belangrijkste Databricks SQL-assets

Introductie tot Databricks SQL

Kevin Barlow

Data Manager

Handige analogie

Een boom bestaat uit veel onderdelen die samen het geheel vormen

GIF van boomsysteem

In Databricks SQL vormen verschillende componenten samen een datawarehouse-oplossing

Databricks SQL-assets

Introductie tot Databricks SQL

Query

  • De basis"eenheid" voor analyse in Databricks SQL
  • Voert SQL-code uit op compute
  • Gebruikt de ANSI SQL-standaard
  • Verwerkt data uit:
    • Unity Catalog
    • Delta-tabellen
    • Bestanden in de data lake
    • Datastromen
SELECT
    orderdate AS Date,
    orderpriority AS Priority
    sum(totalprice) AS TotalPrice
FROM sfdc.sales.orders
GROUP BY
    1, 2
ORDER BY
    1, 2
Introductie tot Databricks SQL

SQL Warehouse

  • Computecluster speciaal voor SQL
  • Optimalisaties (zoals Photon)
  • Eenvoudiger beheer
  • Makkelijk schalen
  • Queries en BI-tools

SQL Warehouse-GIF

Introductie tot Databricks SQL

Tabellen versus views

Tabellen

  • Fysieke verschijningsvormen van gegevenssets
  • Weggeschreven in Delta-indeling
  • Leesbaar en toegankelijk buiten de datapijplijn
  • Kunnen de gegevensindeling optimaliseren (partitionering, enz.)

Tabel in objectopslag

Introductie tot Databricks SQL

Tabellen versus views

Views

  • Virtuele weergaven van queryresultaten in Unity Catalog
  • Snel bij het lezen van data
  • Ideaal om downstream-queries te vereenvoudigen
    • Bronquery heeft veel joins, filters, enz.
  • Incrementele gegevensverwerking beschikbaar

View-diagram

Introductie tot Databricks SQL

Visualisaties en dashboards

Visualisaties

  • Visuele weergaven van een queryresultaat
  • Gemaakt voor één query

Visualisaties configureren

Dashboards

  • Verzameling van meerdere visualisaties
  • Over meerdere gegevenssets / queryresultaten

Voorbeeld-dashboard

Introductie tot Databricks SQL

Laten we oefenen!

Introductie tot Databricks SQL

Preparing Video For Download...