Menjaga Standar Kualitas Data dengan DevOps

Konsep DevOps

Cem Sakarya

DevOps Risk Advisor

DevOps memastikan kode yang baik

  Kode yang baik menghasilkan data yang baik yang mengarah ke ML yang baik.

  • Sebagian besar perangkat lunak memproses data
  • Perangkat lunak yang baik menghasilkan data berkualitas tinggi
  • DevOps membantu menjaga kualitas perangkat lunak
Konsep DevOps

Kualitas data

 

  • Seberapa tepercaya informasinya?
  • Informasi paling baru dan akurat
  • Dapat sulit dan mahal dicapai
  • Tidak semua data butuh kualitas yang sama
  • Ada banyak elemen Kualitas Data
Konsep DevOps

Elemen kualitas data

  Elemen Kualitas Data: Akurasi, Kelengkapan, Konsistensi, Relevansi, Ketepatan Waktu

 

  • Elemen memecah dan mendefinisikan Kualitas Data
  • Harus dilacak dan distandardisasi
Konsep DevOps

   

Elemen Kualitas Data: Akurasi, Kelengkapan, Konsistensi, Relevansi, Ketepatan Waktu; Akurasi Disorot

   

  • Apakah data benar di tiap detail?
  • Harus dipantau ketat
Konsep DevOps

   

Elemen Kualitas Data: Akurasi, Kelengkapan, Konsistensi, Relevansi, Ketepatan Waktu; Kelengkapan Disorot

   

  • Seberapa lengkap datanya?
  • Periksa apakah data hilang saat disimpan di basis data
  • Periksa apakah data hilang saat dipindahkan antar basis data
Konsep DevOps

   

Elemen Kualitas Data: Akurasi, Kelengkapan, Konsistensi, Relevansi, Ketepatan Waktu; Konsistensi Disorot

   

  • Konsistensi terkait keandalan informasi
  • Juga disebut Integritas Data
  • Harus dipantau dan diuji ketat
Konsep DevOps

   

Elemen Kualitas Data: Akurasi, Kelengkapan, Konsistensi, Relevansi, Ketepatan Waktu; Relevansi Disorot

   

  • Simpan dan kelola hanya informasi yang relevan
  • Informasi tidak relevan membuang waktu dan sumber daya
Konsep DevOps

   

Elemen Kualitas Data: Akurasi, Kelengkapan, Konsistensi, Relevansi, Ketepatan Waktu; Ketepatan Waktu Disorot

   

  • Seberapa mutakhir informasinya?
  • Data lama bisa diganti dengan yang lebih baru
  • Data mentah dalam microservice tidak dipakai untuk analisis
  • Microservice berkomunikasi via panggilan API untuk info terbaru
  • Data dalam microservice harus direplikasi dengan frekuensi yang wajar
Konsep DevOps

Ayo berlatih!

Konsep DevOps

Preparing Video For Download...