De ondervragingsfase: datakwaliteit

AI voor data-analisten

Andy Cotgreave

Author and Speaker, Former Technical Evangelist at Tableau

De usual suspects

Datakwaliteitsproblemen 1

AI voor data-analisten

De lastigere problemen die AI opent

Datakwaliteitsproblemen 2

AI voor data-analisten

Vage duplicaten

 

  • Traditioneel: regels handmatig maken, voor altijd onderhouden
  • AI: schrijft de match-logica en voegt semantisch begrip toe

 

  • Output → een query of groepering die je kunt lezen en aanpassen

Fuzzy-duplicaten

AI voor data-analisten

Schendingen van tijdsvolgorde

Tijdvolgorde

  • Traditioneel: SQL schrijven die timestamps vergelijkt
  • AI: beschrijf wat niet mag gebeuren → AI schrijft de query
AI voor data-analisten

Logische inconsistenties

Logische inconsistenties

 

  • Traditioneel: referentietabellen — iemand moet ze beheren
  • AI: wereldkennis, geen referentiedata nodig
AI voor data-analisten

Onderzoek het werk van de AI

 

  • AI is geen magie — het genereert queries, code of regels
  • Dat werk kan fout zijn: slechte regex, gehallucineerde businessregel

AI-ondervraging

AI voor data-analisten

Problemen oplossen

Schone data 1

Schone data 2

AI voor data-analisten

Laten we oefenen!

AI voor data-analisten

Preparing Video For Download...