Verifieerbaarheid en vertrouwen

AI voor data-analisten

Andy Cotgreave

Author and Speaker, Former Technical Evangelist at Tableau

Op het nippertje gemist...

claude_error1.jpg

AI voor data-analisten

Op het nippertje gemist...

claude_error2.jpg

AI voor data-analisten

AI straalt vertrouwen uit

 

  • Foute outputs lijken net zo gepolijst als juiste
  • Geen visuele hint: "Dit kan fout zijn"
  • Als je niet checkt, verzend jíj de fout

ai_hallucination.png

AI voor data-analisten

Verifiëren is niet dubbel doen

 

  • Verkeerde reflex: het werk opnieuw doen in een BI‑tool
  • Behandel AI‑output als een snelle junior analist — krachtig, niet vanzelf betrouwbaar
  • Jouw taak: stress‑testen, niet overdoen

verification_duplication.png

AI voor data-analisten

De verificatieworkflow

spot1.jpg

AI voor data-analisten

De verificatieworkflow

spot2.jpg

 

  1. Kies een specifiek datapunt
  2. Filter de ruwe data handmatig naar dat punt
  3. Verifieer de berekening voor dat punt
AI voor data-analisten

De verificatieworkflow

spot3.jpg

 

  1. Kopieer de code of output van AI
  2. Plak in een andere assistant of chat
  3. Vraag om logische fouten te vinden
AI voor data-analisten

De verificatieworkflow

spot4.jpg

 

  1. Doe een business sanity check
  2. Vraag: past deze insight bij de ervaring?
AI voor data-analisten

De verificatieworkflow

spot5.jpg

 

  1. Laat AI z'n eigen code testen op randgevallen (nulls, dubbels, nullen)
AI voor data-analisten

Stem de strengheid af op het risico

rigor_stakes.png

  • Exploratief of ad‑hoc werk → lichtere aanpak
  • Productiedashboard, boardpresentatie, etc. → zwaardere aanpak
AI voor data-analisten

Human-in-the-loop is de kern van je werk

human_in_the_loop.png

AI voor data-analisten

AI‑jaknikkersgedrag

 

  • AI is het vaak met je eens
  • Hint, tegenspreek of suggereer een hypothese → AI volgt die lijn
  • Verdediging bij prompten: blijf neutraal
  • Verificatieverdediging: wees het strengst voor bevindingen die bevestigen wat je al dacht

ai_sycophancy.png

AI voor data-analisten

Laten we oefenen!

AI voor data-analisten

Preparing Video For Download...