Veri doğrulama

Sorumlu AI Veri Yönetimi

Maria Prokofieva

Lead ML engineer

Neleri ele alacağız

  • Veri doğrulama
  • Sorumlu boyutlar
  • Yapay zekâ finansal danışmanı

doğrulama

Sorumlu AI Veri Yönetimi

Veri doğrulama

  • Daha ayrıntılı yaklaşım
  • Verinin teknik bütünlüğünü kontrol edin
  • Adaleti kontrol edin

veri doğrulama

Sorumlu AI Veri Yönetimi

Teknik bütünlük

  • Tam veri
  • Yinelenen, hatalı veya eski veri yok
  • Hukuka uygun
  • Doğruluk, tutarlılık, tamlık ve zamanlılık kontrolleri

Sorumlu veri boyutları

Sorumlu AI Veri Yönetimi

Finansal danışman: teknik bütünlük

  • Veride tutarsızlıklar ve anormallikler
  • Hatalı atanmış alanlar
  • Erken tespit edip düzeltin

hatalı kategori örneği

Sorumlu AI Veri Yönetimi

Finansal danışman: teknik bütünlük

  • Veri toplama dönemleri ve yöntemlerinde anormallikler
  • Bölgesel ekonomik eşitsizlikler
  • Tüm kullanıcı grupları için optimize edilmemiş

veri toplama yöntemlerinde anormallikler

Sorumlu AI Veri Yönetimi

Adalet değerlendirmesi

  • Eşit fırsat
  • Farklı etkiler
  • Demografik denge
  • Tüm proje aşamalarına uygulanır

 

Finansal danışman:

  • Tüm bireylere ilgili ve faydalı tavsiye verilir
  • Tüm demografik gruplarda tutarlı öneriler
  • Hiçbir grup orantısız etkilenmez
Sorumlu AI Veri Yönetimi

Veri doğrulama yaklaşımları

  • Temel değişkenleri belirleyin
  • Veri dağılımını analiz edin
  • Veriyi temizleyin ve istatistiksel testler uygulayın
  • Veriyi dengeleyin
  • Adalet metriklerini kontrol edin
  • Modelleri çeşitli veri setleriyle test edin
Sorumlu AI Veri Yönetimi

Finansal danışman

danışman logosu

  • Aykırı değerleri kaldırın, eksik değerleri atayın
  • Öncesi/sonrası tanımlayıcı istatistiklerle doğrulayın
  • Düşük gelir grubu için aşırı örnekleme yapın
  • Model performansı ve adalet metriklerini kontrol edin
  • Katmanlı çapraz doğrulama
  • "Görülmemiş" veride test edin
Sorumlu AI Veri Yönetimi

Ayo berlatih!

Sorumlu AI Veri Yönetimi

Preparing Video For Download...