Cos'è un modello dbt?
Introduzione a dbt
Mike Metzger
Data Engineer
Cos'è un data model?
- Concettuale, con definizioni diverse a seconda del contesto
- Rappresenta il significato logico dei dati
- Come i dati e le loro componenti sono collegati
- Aiuta la collaborazione tra utenti
Cos'è un data model?
- Concettuale, con definizioni diverse a seconda del contesto
- Rappresenta il significato logico dei dati
- Come i dati e le loro componenti sono collegati
- Aiuta la collaborazione tra utenti
| Specie | # di zampe | Velenoso |
|---|---|---|
| Ghepardo | 4 | No |
| Anatra | 2 | No |
| Ornitorinco | 4 | Sì |
| Serpente a sonagli | 0 | Sì |
Cos'è un modello in dbt?
- Rappresenta le varie trasformazioni
- In genere scritto in SQL
- Le versioni più recenti possono usare Python
- Di solito una query
SELECT - Ogni modello è un file di testo con estensione .sql
Modello dbt semplice
- Crea una directory in
models - Crea un file
.sqlnella directory sopra - Aggiungi l'SQL nel nuovo file
- Esegui
dbt runper materializzare il modello
bash> mkdir models/order
bash> touch models/order/customer_orders.sql
select first_name,
last_name,
shipping_address,
item_quantity
from source_table
bash> dbt run
Lettura da Parquet
- Parquet?
- Formato file binario colonnare
- DuckDB legge i file Parquet direttamente
- read_parquet
SELECT * FROM read_parquet('filename.parquet')
- O semplicemente il nome file tra apici singoli
SELECT * FROM 'filename.parquet'
Passons à la pratique !
Introduzione a dbt
