Faza de interogare: calitatea datelor

AI pentru analiști de date

Andy Cotgreave

Author and Speaker, Former Technical Evangelist at Tableau

Suspecții obișnuiți

data_quality_issues1.jpg

AI pentru analiști de date

Problemele complexe pe care AI le rezolvă

data_quality_issues2.jpg

AI pentru analiști de date

Duplicate aproximative

 

  • Tradițional: reguli scrise manual, întreținute la nesfârșit
  • AI: scrie logica de potrivire și aduce înțelegere semantică

 

  • Rezultat → o interogare sau grupare pe care o poți citi și ajusta

fuzzy_duplicates.png

AI pentru analiști de date

Încălcări ale ordinii temporale

time_order.jpg

  • Tradițional: scrie SQL care compară marcajele temporale
  • AI: descrie ce nu ar trebui să se întâmple → AI scrie interogarea
AI pentru analiști de date

Inconsistențe logice

logical_inconsistencies.jpg

 

  • Tradițional: tabele de referință — cineva trebuie să le întrețină
  • AI: cunoștințe generale, fără date de referință necesare
AI pentru analiști de date

Interoghează munca AI-ului

 

  • AI nu e magie — generează interogări, cod sau reguli
  • Această muncă poate fi greșită: regex incorect, regulă de business halucinată

ai_interrogation.jpg

AI pentru analiști de date

Rezolvarea problemelor

clean_data1.jpg

clean_data2.jpg

AI pentru analiști de date

Hai să exersăm!

AI pentru analiști de date

Preparing Video For Download...