Asigurarea standardelor de calitate a datelor cu DevOps

Concepte DevOps

Cem Sakarya

DevOps Risk Advisor

DevOps asigură cod de calitate

  Cod bun generează date bune, care duc la ML performant.

  • Majoritatea aplicațiilor gestionează date
  • Software-ul de calitate produce date de calitate
  • DevOps ajută la menținerea calității în software
Concepte DevOps

Calitatea datelor

 

  • Cât de credibile sunt informațiile?
  • Informații cât mai recente și precise
  • Poate fi dificil și costisitor de realizat
  • Nu toate datele necesită același nivel de calitate
  • Calitatea datelor are mai multe elemente
Concepte DevOps

Elementele calității datelor

  Elemente de calitate a datelor: Acuratețe, Completitudine, Consistență, Relevanță, Actualitate

 

  • Elementele descompun și definesc calitatea datelor
  • Trebuie urmărite și standardizate
Concepte DevOps

   

Elemente de calitate a datelor: Acuratețe, Completitudine, Consistență, Relevanță, Actualitate; Acuratețe evidențiată

   

  • Datele sunt corecte în toate detaliile?
  • Trebuie monitorizate riguros
Concepte DevOps

   

Elemente de calitate a datelor: Acuratețe, Completitudine, Consistență, Relevanță, Actualitate; Completitudine evidențiată

   

  • Cât de complete sunt datele?
  • Verificați dacă datele se pierd la stocarea în baza de date
  • Verificați dacă datele se pierd la migrarea între baze de date
Concepte DevOps

   

Elemente de calitate a datelor: Acuratețe, Completitudine, Consistență, Relevanță, Actualitate; Consistență evidențiată

   

  • Consistența se referă la fiabilitatea informațiilor
  • Este cunoscută și ca Integritate a datelor
  • Trebuie monitorizată și testată riguros
Concepte DevOps

   

Elemente de calitate a datelor: Acuratețe, Completitudine, Consistență, Relevanță, Actualitate; Relevanță evidențiată

   

  • Păstrați și gestionați doar informațiile relevante
  • Informațiile irelevante consumă timp și resurse
Concepte DevOps

   

Elemente de calitate a datelor: Acuratețe, Completitudine, Consistență, Relevanță, Actualitate; Actualitate evidențiată

   

  • Cât de actuale sunt informațiile?
  • Datele vechi pot fi înlocuite cu informații mai recente
  • Datele brute din microservicii nu sunt utilizate în analiza datelor
  • Microserviciile comunică prin apeluri API pentru a obține cele mai recente date
  • Datele din microservicii trebuie replicate la o frecvență acceptabilă
Concepte DevOps

Să exersăm!

Concepte DevOps

Preparing Video For Download...