Antwoorden beoordelen

Prompt engineering begrijpen

Alex Banks

Founder & Educator

Introductie tot het beoordelen van antwoorden

Elk hulpmiddel heeft zijn grenzen. ChatGPT heeft een kennisafkap. Oplossing: slim prompten.

1 Bron afbeeldingen: DALLE-3
Prompt engineering begrijpen

De vier pijlers van evaluatie

LARF

  • Logische consistentie
  • Accuraatheid
  • Relevantie
  • Feitenkloppendheid

Blije, lachende oudere persoon

1 Bron afbeeldingen: DALLE-3
Prompt engineering begrijpen

Logische consistentie - de coherentiecheck

Persoon werkt aan zonnepaneel en de prompt "what are the benefits and drawbacks of solar energy"

1 Bron afbeeldingen: DALLE-3
Prompt engineering begrijpen

Logische consistentie - de coherentiecheck

Persoon werkt aan zonnepaneel en de prompt "what are the benefits and drawbacks of solar energy"

Lijst met voordelen

1 Bron afbeeldingen: DALLE-3
Prompt engineering begrijpen

Logische consistentie - de coherentiecheck

Persoon werkt aan zonnepaneel en de prompt "what are the benefits and drawbacks of solar energy"

Lijst met nadelen

1 Bron afbeeldingen: DALLE-3
Prompt engineering begrijpen

Accuraatheid en de neiging tot hallucineren

Hallucinatie -> met overtuiging een fout antwoord geven.  

Onjuist antwoord op de vraag "who was the first person to walk the moon"

1 Bron afbeeldingen: DALLE-3
Prompt engineering begrijpen

Relevantie - past bij de context

Relevantie -> antwoord sluit aan op de context en bedoeling van de prompt.   What are the top tourist attractions in Paris

1 Bron afbeeldingen: DALLE-3
Prompt engineering begrijpen

Relevantie - past bij de context

Wat zijn de topbezienswaardigheden in Parijs met onjuist antwoord gemarkeerd

1 Bron afbeeldingen: DALLE-3
Prompt engineering begrijpen

Feitenkloppendheid voorbij de afkapdatum

Are universal basic income trials successful in reducing poverty? Provice your answer by only referencing and citing reliable sources.

Prompt engineering begrijpen

Feitenkloppendheid voorbij de afkapdatum

ChatGPT-afkapdata

1 Bron afbeeldingen: ChatGPT
Prompt engineering begrijpen

Laten we oefenen!

Prompt engineering begrijpen

Preparing Video For Download...