Évaluer les réponses

Comprendre le prompt engineering

Alex Banks

Founder & Educator

Introduction à l'évaluation des réponses

Chaque outil a ses limites. ChatGPT a une date limite de connaissances. Solution : invites réfléchies.

1 Source des images : DALLE-3
Comprendre le prompt engineering

Les quatre piliers de l'évaluation

LARF

  • Cohérence logique
  • Précision
  • Pertinence
  • Véracité factuelle

Personne âgée souriante et heureuse

1 Source des images : DALLE-3
Comprendre le prompt engineering

Cohérence logique – le test de cohérence

Personne travaillant sur un panneau solaire et invite : « what are the benefits and drawbacks of solar energy »

1 Source des images : DALLE-3
Comprendre le prompt engineering

Cohérence logique – le test de cohérence

Personne travaillant sur un panneau solaire et invite : « what are the benefits and drawbacks of solar energy »

Liste des avantages

1 Source des images : DALLE-3
Comprendre le prompt engineering

Cohérence logique – le test de cohérence

Personne travaillant sur un panneau solaire et invite : « what are the benefits and drawbacks of solar energy »

Liste des inconvénients

1 Source des images : DALLE-3
Comprendre le prompt engineering

Précision et tendance à l'hallucination

Hallucination → donner avec assurance une réponse erronée.  

Réponse erronée à la question « who was the first person to walk the moon »

1 Source des images : DALLE-3
Comprendre le prompt engineering

Pertinence – respecter le contexte

Pertinence → la réponse cadre avec le contexte et l'intention de l'invite.   Quelles sont les principales attractions touristiques à Paris

1 Source des images : DALLE-3
Comprendre le prompt engineering

Pertinence – respecter le contexte

« Quelles sont les principales attractions touristiques à Paris » avec mauvaise réponse en surbrillance

1 Source des images : DALLE-3
Comprendre le prompt engineering

Véracité factuelle au-delà de la date limite

« Are universal basic income trials successful in reducing poverty? Provice your answer by only referencing and citing reliable sources. »

Comprendre le prompt engineering

Véracité factuelle au-delà de la date limite

Dates limites des connaissances de ChatGPT

1 Source des images : ChatGPT
Comprendre le prompt engineering

Passons à la pratique !

Comprendre le prompt engineering

Preparing Video For Download...