Veri ardışık düzeni

Veri Mühendisliğini Anlamak

Hadrien Lacroix

Content Developer at DataCamp

Veri yeni petrolse...

¹ The Economist, 2017-05-06, David Parkins

Veri mühendisliğine dönüş

• Al
• İşle
• Depola
• Ardışık düzene ihtiyaç var
• Akışı istasyondan istasyona otomatikleştir
• Güncel, doğru, ilgili veri sağla

$$

Veri ardışık düzenleri verinin verimli akışını sağlar

Otomatikleştir

• Çıkarma
• Dönüştürme
• Birleştirme
• Doğrulama
• Yükleme

Azalt

• İnsan müdahalesi
• Hatalar
• Verinin akış süresi

ETL ve veri ardışık düzenleri

ETL

• Veri ardışık düzenleri tasarlamak için yaygın çatı
• 1) Veriyi Extract et
• 2) Çıkarılan veriyi Transform et
• 3) Dönüştürülen veriyi başka bir veritabanına Load et

Veri ardışık düzenleri

• Veriyi bir sistemden diğerine taşır
• ETL’yi izleyebilir
• Veri dönüştürülmeyebilir
• Veri doğrudan uygulamalara yüklenebilir

Özet

• Veri ardışık düzeni nedir
• Ne yapar
• Neden önemlidir
• Spotflix’te nasıl uygulanır
• ETL nedir ve incelikleri

Hadi pratik yapalım!

Veri Mühendisliğini Anlamak