Vad är en dbt-modell?
Introduktion till dbt
Mike Metzger
Data Engineer
Vad är en datamodell?
- Konceptuellt, med olika definitioner beroende på sammanhang
- Representerar datas logiska innebörd
- Hur data och dess komponenter hänger ihop
- Underlättar samarbete
Vad är en datamodell?
- Konceptuellt, med olika definitioner beroende på sammanhang
- Representerar datas logiska innebörd
- Hur data och dess komponenter hänger ihop
- Underlättar samarbete
| Art | Antal ben | Giftig |
|---|---|---|
| Gepard | 4 | Nej |
| And | 2 | Nej |
| Näbbdjur | 4 | Ja |
| Skallerorm | 0 | Ja |
Vad är en modell i dbt?
- Representerar olika transformationer
- Skrivs vanligtvis i SQL
- Nyare versioner kan använda Python
- Oftast en
SELECT-fråga - Varje modell representeras av en textfil med filtillägget .sql
Enkel dbt-modell
- Skapa en katalog i katalogen
models - Skapa en
.sql-fil i ovanstående katalog - Lägg till SQL-satsen i den nya filen
- Kör
dbt runför att materialisera modellen
bash> mkdir models/order
bash> touch models/order/customer_orders.sql
select first_name,
last_name,
shipping_address,
item_quantity
from source_table
bash> dbt run
Läsa från Parquet
- Parquet?
- Kolumnbaserat binärt filformat
- DuckDB kan läsa Parquet-filer direkt
- read_parquet
SELECT * FROM read_parquet('filename.parquet')
- Eller bara filnamnet inom enkla citattecken
SELECT * FROM 'filename.parquet'
Nu kör vi en övning!
Introduktion till dbt
