Hodnocení odpovědí

Understanding Prompt Engineering

Alex Banks

Founder & Educator

Úvod do hodnocení odpovědí

Každý nástroj má svá omezení. ChatGPT má omezené znalosti do určitého data. Řešení: chytré promptování.

1 Zdroj obrázků: DALLE-3
Understanding Prompt Engineering

Čtyři pilíře hodnocení

LARF

  • Logická konzistence
  • Accuracy (přesnost)
  • Relevance
  • Faktická správnost

Šťastný, usmívající se starší člověk

1 Zdroj obrázků: DALLE-3
Understanding Prompt Engineering

Logická konzistence – kontrola soudržnosti

Člověk pracující na solárním panelu a výzva "jaké jsou výhody a nevýhody solární energie"

1 Zdroj obrázků: DALLE-3
Understanding Prompt Engineering

Logická konzistence – kontrola soudržnosti

Člověk pracující na solárním panelu a výzva "jaké jsou výhody a nevýhody solární energie"

Seznam výhod

1 Zdroj obrázků: DALLE-3
Understanding Prompt Engineering

Logická konzistence – kontrola soudržnosti

Člověk pracující na solárním panelu a výzva "jaké jsou výhody a nevýhody solární energie"

Seznam nevýhod

1 Zdroj obrázků: DALLE-3
Understanding Prompt Engineering

Přesnost a sklon k halucinacím

Halucinace -> sebejistě uvedená nesprávná odpověď.  

Nesprávná odpověď na otázku "kdo byl první člověk na Měsíci"

1 Zdroj obrázků: DALLE-3
Understanding Prompt Engineering

Relevance – soulad s kontextem

Relevance -> odpověď odpovídá kontextu a záměru výzvy.   Jaké jsou nejlepší turistické atrakce v Paříži

1 Zdroj obrázků: DALLE-3
Understanding Prompt Engineering

Relevance – soulad s kontextem

Jaké jsou nejlepší turistické atrakce v Paříži s vyznačenou nesprávnou odpovědí

1 Zdroj obrázků: DALLE-3
Understanding Prompt Engineering

Faktická správnost za hranicí data znalostí

Jsou experimenty s univerzálním základním příjmem úspěšné v omezování chudoby? Uveďte odpověď pouze s odkazem na spolehlivé zdroje a jejich citacemi.

Understanding Prompt Engineering

Faktická správnost za hranicí data znalostí

Data omezení znalostí ChatGPT

1 Zdroj obrázků: ChatGPT
Understanding Prompt Engineering

Pojďme si procvičit!

Understanding Prompt Engineering

Preparing Video For Download...