Kıyaslama ve sürekli iyileştirme

Databricks Genie'ye Giriş

Gang Wang

Senior Data Scientist

Kıyaslama nedir

Altın Standart soru ve cevaplar

• Doğruluğu hesaplar

Kıyaslama sıklığı

• Basit sayımlardan karmaşık Trusted KPI'lara kadar 10-20 Altın Standart soru
• Geliştirme sırasında çalıştır - günlük veya her önemli kürasyon değişikliğinden sonra
• Şema değişikliklerinden sonra yeni tablo/sütun eklerken tüm paketi hemen çalıştır
• Canlıda - haftalık ya da aylık sağlık kontrolü olarak çalıştır

Sonuçları yorumlama

• Geçiş oranı manşet bir puan verir
• Asıl değer başarısızlıkları yorumlamaktadır
• "Şehre göre toplam satış" geçiyor, ama "Belediyeye göre toplam gelir" kalıyor mu?
• Bu, Genie'nin Eşanlamlara ihtiyacı var demektir; mantık değişimi değil
• Boşluğu bulmak için Beklenen SQL ile Üretilen SQL'i karşılaştır

Düzeltmeleri önceliklendirme

• Kıyas sonuçlarında başarısızlık örüntülerini belirle
• Sonuçtan Kürasyon menüsüne atlayıp eşanlam ve örnek ekle
• Sıklık ve iş etkisine göre önceliklendir
• Önce yüksek sıklık, yüksek etki hataları düzelt

Sürekli iyileştirme döngüsü

$$

Adım 1: Oluştur Altın Standart sorulardan test paketini.

Sürekli iyileştirme döngüsü

$$

Adım 2: Çalıştır ve sonuçları yorumla. Ne başarısız oldu ve neden?

Sürekli iyileştirme döngüsü

$$

Adım 3: Önceliklendir ve eşanlamlar, ilişkiler veya SQL örnekleriyle kürasyon yap.

Sürekli iyileştirme döngüsü

$$

Adım 4: Doğrula kıyaslamayı yeniden çalıştırarak iyileşmeyi. Yayına almadan önce doğruluğun arttığını teyit et.

Kuruluş genelinde ölçekleme

• Veriyi ve izinleri Unity Catalog ile merkezileştir
• Şirket genelindeki KPI'lar için Trusted Assets kullan
• Editor erişimini eğitimli Veri Sorumlularına ayır
• Başparmak yukarı/aşağı geri bildirimini zorunlu kıl
• Doğruluk sapmasını yakalamak için düzenli kıyaslamalar çalıştır

Hadi pratik yapalım!

Databricks Genie'ye Giriş