Denken agents aan elektrische schapen? Het ReAct-framework

Inleiding tot AI-agents

Adel Nehme

VP of AI Curriculum, DataCamp

De verschillende soorten modelgedachten

¹ De Hugging Face Agents-cursus: https://github.com/huggingface/agents-course

De verschillende soorten modelgedachten

Denken	Voorbeeld
Planning	"Om ze te helpen met verhuizen, moet ik verhuisbedrijven zoeken, prijzen vergelijken en kijken of ze beschikbaar zijn op de verhuisdatum."

¹ De Hugging Face Agents-cursus: https://github.com/huggingface/agents-course

De verschillende soorten modelgedachten

Denken	Voorbeeld
Planning	"Om ze te helpen met verhuizen, moet ik verhuisbedrijven zoeken, prijzen vergelijken en kijken of ze beschikbaar zijn op de verhuisdatum."
Analyse	"Uit hun uitgavenpatroon blijkt dat ze te veel betalen voor abonnementen die ze zelden gebruiken."

¹ De Hugging Face Agents-cursus: https://github.com/huggingface/agents-course

De verschillende soorten modelgedachten

Denken	Voorbeeld
Planning	"Om ze te helpen met verhuizen, moet ik verhuisbedrijven zoeken, prijzen vergelijken en kijken of ze beschikbaar zijn op de verhuisdatum."
Analyse	"Uit hun uitgavenpatroon blijkt dat ze te veel betalen voor abonnementen die ze zelden gebruiken."
Besluitvorming	"Omdat ze het morgen nodig hebben, stel ik spoedbezorging voor, ook al kost dat wat extra."

¹ De Hugging Face Agents-cursus: https://github.com/huggingface/agents-course

De verschillende soorten modelgedachten

Denken	Voorbeeld
Planning	"Om ze te helpen met verhuizen, moet ik verhuisbedrijven zoeken, prijzen vergelijken en kijken of ze beschikbaar zijn op de verhuisdatum."
Analyse	"Uit hun uitgavenpatroon blijkt dat ze te veel betalen voor abonnementen die ze zelden gebruiken."
Besluitvorming	"Omdat ze het morgen nodig hebben, stel ik spoedbezorging voor, ook al kost dat wat extra."
Probleemoplossing	"Om deze code te verbeteren, moet ik hem eerst profileren om te zien waar het knelpunt zit."

¹ De Hugging Face Agents-cursus: https://github.com/huggingface/agents-course

De verschillende soorten modelgedachten

Denken	Voorbeeld
Geheugenintegratie	"Vorige week zeiden ze dat ze lactose-intolerant zijn, dus ik laat zuivelproducten weg uit deze receptsuggesties."

¹ De Hugging Face Agents-cursus: https://github.com/huggingface/agents-course

De verschillende soorten modelgedachten

Denken	Voorbeeld
Geheugenintegratie	"Vorige week zeiden ze dat ze lactose-intolerant zijn, dus ik laat zuivelproducten weg uit deze receptsuggesties."
Zelfreflectie	"Mijn uitleg was te technisch, ik zal het vereenvoudigen met een alledaags voorbeeld."

¹ De Hugging Face Agents-cursus: https://github.com/huggingface/agents-course

De verschillende soorten modelgedachten

Denken	Voorbeeld
Geheugenintegratie	"Vorige week zeiden ze dat ze lactose-intolerant zijn, dus ik laat zuivelproducten weg uit deze receptsuggesties."
Zelfreflectie	"Mijn uitleg was te technisch, ik zal het vereenvoudigen met een alledaags voorbeeld."
Doelen stellen	"Voordat ik hun trainingsschema plan, moet ik weten hoe fit ze zijn en hoeveel tijd ze hebben."

¹ De Hugging Face Agents-cursus: https://github.com/huggingface/agents-course

De verschillende soorten modelgedachten

Denken	Voorbeeld
Geheugenintegratie	"Vorige week zeiden ze dat ze lactose-intolerant zijn, dus ik laat zuivelproducten weg uit deze receptsuggesties."
Zelfreflectie	"Mijn uitleg was te technisch, ik zal het vereenvoudigen met een alledaags voorbeeld."
Doelen stellen	"Voordat ik hun trainingsschema plan, moet ik weten hoe fit ze zijn en hoeveel tijd ze hebben."
Prioriteiten stellen	"Ze moeten eerst de vluchten boeken en dan pas het hotel, want de vluchtprijzen stijgen sneller."

¹ De Hugging Face Agents-cursus: https://github.com/huggingface/agents-course

Het ReAct-framework: waar gedachten vandaan komen

react

¹ Yao, S., Zhao, J., Yu, D., Du, N., Shafran, I., Narasimhan, K., Cao, Y. (2022). ReAct: Synergizing Reasoning and Acting in Language Models. arXiv preprint arXiv:2210.03629.

Het ReAct-framework: Redeneren en handelen

Redenering

Handeling

¹ Yao, S., Zhao, J., Yu, D., Du, N., Shafran, I., Narasimhan, K., Cao, Y. (2022). ReAct: Synergizing Reasoning and Acting in Language Models. arXiv preprint arXiv:2210.03629.

Het ReAct-framework: Redeneren en handelen

Redenering

Chain-of-thought-prompting

[Prompt...]. Denk stap voor stap.

Handeling

¹ Yao, S., Zhao, J., Yu, D., Du, N., Shafran, I., Narasimhan, K., Cao, Y. (2022). ReAct: Synergizing Reasoning and Acting in Language Models. arXiv preprint arXiv:2210.03629.

Het ReAct-framework: Redeneren en handelen

Redenering

Chain-of-thought-prompting

[Prompt...]. Denk stap voor stap.

Handeling

Voorbeelden van denken > handelen > observeren

[Prompt...]. Gebruik deze indeling:

Denken: [Bedenk wat je wilt berekenen]

Handelen: [Reken het uit]

Observeren: [Resultaat]

...herhaal indien nodig...

Definitief antwoord: [Volledige oplossing]

¹ Yao, S., Zhao, J., Yu, D., Du, N., Shafran, I., Narasimhan, K., Cao, Y. (2022). ReAct: Synergizing Reasoning and Acting in Language Models. arXiv preprint arXiv:2210.03629.

ReAct in actie: eenvoudige rekenkunde

gpt-4o

ReAct in actie: eenvoudige rekenkunde

De vraag

Reken uit wat het in totaal kost als ik 3 laptops koop voor $ 899 per stuk, met 15% korting en 8% btw.

Het juiste antwoord

$ 2475,85

ReAct in actie: eenvoudige rekenkunde

onjuist

Gebruikte prompt

Reken uit wat het in totaal kost als ik 3 laptops koop voor $ 899 per stuk, met 15% korting en 8% btw. Geef alleen het antwoord.

ReAct in actie: eenvoudige rekenkunde

correct

Gebruikte prompt

Calculate the total cost if I buy 3 laptops at $899 
each with a 15% discount and 8% sales tax. Think step by step.

Follow this format:

Thought: [Think about what to calculate first]
Action: [Perform calculation]
Observation: [Result of calculation]
...repeat as needed...
Final Answer: [Complete solution]

Example:

Thought: Calculate base cost first
Action: 2 × $50 = $100
Thought: Apply 10% discount
Action: $100 - ($100 × 0.10) = $90
Final Answer: Total is $90

Zonder ReAct-prompt

onjuist_antwoord

Het juiste antwoord $ 2475,85

Antwoord van ChatGPT: $ 2.776,63

Met ReAct-prompt

correct_answer

Het juiste antwoord $ 2475,85

Antwoord van ChatGPT: $ 2475,85

ReAct als manier van denken

ReAct maakt deel uit van de systeemprompt van het model

Systeemprompts zijn verborgen instructies die het model vertellen hoe het zich tijdens alle gesprekken moet gedragen.

¹ Afbeelding gegenereerd met GPT-4o

Redeneringsmodellen en ReAct

ReAct is vooral handig voor 'traditionele' taalmodellen, zoals de modellen van de GPT-serie
De nieuwere modellen zijn specifiek getraind om stap voor stap te denken en hebben geen ReAct-prompts nodig

$$ Voorbeeld van redeneringsmodellen

OpenAI o-serie-modellen
DeepSeek R-serie-modellen
Gemini-denkmodellen

Hoe je een redeneringsmodel herkent

denk_modellen

Laten we oefenen!

Inleiding tot AI-agents