Recapitulare: studiu de caz dbt

Studiu de caz: Construirea modelelor de date pentru e-commerce cu dbt

Susan Sun

Freelance Data Scientist

Capitolul 1: Configurarea dbt

Configurare:
- Verificare instalare: dbt --versions, which dbt
- Inițializare dbt: dbt init
Încărcare date:
- Încărcare fișiere seed dbt (ex. centru de distribuție): dbt seed
- Încărcare fișiere sursă dbt. Ex. {{ source('looker_ecommerce', 'orders') }}
Revizuire subcomenzile dbt: dbt run, dbt test, dbt build
Revizuire structura fișierelor și folderelor din proiectul dbt

Capitolul 2: Construirea modelelor dbt

Construire modele staging, mart și snapshot în dbt
Adăugare documentație pentru tabele/coloane și teste de date dbt

Diagramă graf aciclic direcționat care ilustrează toate sursele și modelele dbt și relațiile dintre acestea. Sursele sunt afișate în verde. Modelele și mart-urile sunt afișate în albastru.

Capitolul 3: Jinja cu dbt

Reducerea codului repetat folosind expresii Jinja: set, loop, macros
Utilizarea dbt compile și gestionarea spațiilor albe pentru dezvoltare

{%- set order_statuses = ['Shipped', 'Complete', 'Processing'] -%}

SELECT 
    user_id,
    {%- for order_status in order_statuses %}
        COUNT(DISTINCT CASE WHEN status = '{{ order_status }}' THEN order_id END) 
        AS num_orders_{{ order_status }}
    {%- endfor %}
FROM {{ ref('stg_looker__orders') }}
GROUP BY 1

Felicitări!

Studiu de caz: Construirea modelelor de date pentru e-commerce cu dbt