Congratulazioni!

Introduzione a Databricks Lakehouse

Gang Wang

Senior Data Scientist

Capitolo 1: Il paradigma Lakehouse

$$

  • Il lakehouse unisce la flessibilità del lake all'affidabilità del warehouse
  • La medallion architecture organizza i dati: bronze → silver → gold
  • Il control plane è gestito da Databricks; il data plane è nel tuo cloud

$$

recraft: half: Un edificio moderno con facciata in vetro che riflette sia un magazzino sia un lago, a rappresentare la lakehouse architecture che unifica due approcci

Introduzione a Databricks Lakehouse

Capitolo 2: Compute e Notebook

$$

recraft: half: Un cluster di server interconnessi con nodi luminosi e un notebook aperto davanti, a rappresentare risorse di calcolo e sviluppo interattivo

$$

  • All-purpose clusters per lavoro interattivo; jobs clusters per automazione
  • Autoscaling, auto-termination e policy tengono sotto controllo i costi
  • I Notebook supportano più linguaggi con magic commands
  • Databricks Repos porta l'integrazione Git completa nello workspace
Introduzione a Databricks Lakehouse

Capitolo 3: Governance e condivisione

$$

  • Unity Catalog offre governance centralizzata e tracciamento automatico della lineage
  • Delta Sharing dà ai partner esterni accesso live ai dati, senza copie
  • Condivisione nativa tra Databricks; protocollo aperto per qualsiasi piattaforma
  • Lakehouse Federation interroga database esterni senza spostare i dati

$$

recraft: half: Uno scudo con un lucchetto al centro circondato da flussi di dati che collegano diversi edifici, a rappresentare governance e condivisione sicura dei dati

Introduzione a Databricks Lakehouse

Capitolo 4: Deployment

$$

recraft: half: Un razzo che decolla dallo schermo di un laptop con pipeline di deployment e codice che salgono, a rappresentare il deployment automatico in produzione

$$

  • I Databricks Asset Bundles sostituiscono il deployment manuale da UI con il codice
  • databricks.yml definisce progetto, risorse e target
  • Comandi CLI: validate, deploy, run, destroy
  • Tutto vive in Git: riproducibile, verificabile, automatizzato
Introduzione a Databricks Lakehouse

Dove andare dopo

$$

  • Introduction to Databricks SQL: analisi SQL e warehousing
  • Data Engineering with Databricks: pipeline ETL di produzione
  • Databricks Concepts: workflow end-to-end tra diverse persone

$$

recraft: half: Una strada tortuosa che si perde in lontananza attraverso un paesaggio colorato con cartelli lungo il percorso, a rappresentare il viaggio di apprendimento che ti aspetta

Introduzione a Databricks Lakehouse

Grazie!

Introduzione a Databricks Lakehouse

Preparing Video For Download...