Özel, yeniden kullanılabilir testler oluşturma

Orta Düzey dbt

Mike Metzger

Data Engineer

Yeniden kullanılabilir test nedir?

Birden çok durumda yeniden kullanılabilen test
Yerleşik dbt testine benzer, ancak herhangi bir koşulu denetleyebilir
Jinja şablonlama kullanır
tests/generic klasöründe .sql dosyası olarak kaydedilir
Kullanan her model için model_properties.yml dosyasına eklenmelidir

Yeniden kullanılabilir

¹ Fotoğraf: Sigmund, Unsplash

Yeniden kullanılabilir test oluşturma

{% test check_gt_0(model, column_name) %}

select * 
from {{ model }}
where {{ column_name }} > 0

{% endtest %}

İlk satır (en az): {% test testname(model, column_name) %}
{{ object }} yerlerine geçecek SQL sorgusunu ekleyin
Dosyayı {% endtest %} ile bitirin

Yeniden kullanılabilir testi modele uygulama

model_properties.yml dosyasına ekleyin
Nesneleri gerektiği gibi belirtin
models: name değeri model argümanıdır
columns: name değeri column_name argümanıdır

version: 2

models:
  - name: taxi_rides_raw
    columns:
      - name: tpep_pickup_datetime
        tests:
          - not_null

      - name: total_fare
        tests:
          - check_gt_0

Ek parametreler

Teste ek parametreler ekleyebilirsiniz
accepted_values ve relationships gibidir
Jinja başlığına argüman olarak ekleyin

{% test check_columns_unequal(model, column_name, column_name2) %}

select * from {{ model }}
where {{ column_name }} = {{ column_name2 }}

{% endtest %}

Ek parametreli testleri uygulama

Diğer testler gibi tanımlayın
Test ayrıntılarının altına ek argümanları ekleyin

models:
  - name: order
    columns:
      - name: order_time
        tests:
          - check_columns_unequal:
              column_name2: shipped_time

Hadi pratik yapalım!

Orta Düzey dbt