Few-shot Prompting

Entwickeln von LLM-Anwendungen mit LangChain

Jonathan Bennion

AI Engineer & LangChain Contributor

Einschränkungen von Standard-Prompt-Vorlagen

 

  • PromptTemplate + ChatPromptTemplate
  • ✅ Gut mit wenigen Beispielen
  • ❌ Skaliert nicht für viele Beispiele
  • FewShotPromptTemplate

 

examples = [
    {
        "question": "..."
        "answer": "..."
    },
    ...
]
Entwickeln von LLM-Anwendungen mit LangChain

Erstellen eines Beispieldatensatzes

examples = [
    {
        "question": "Does Henry Campbell have any pets?",
        "answer": "Henry Campbell has a dog called Pluto."
    },
    ...
]
# Convert pandas DataFrame to list of dicts
examples = df.to_dict(orient="records")
Entwickeln von LLM-Anwendungen mit LangChain

Formatierung der Beispiele

from langchain_core.prompts import FewShotPromptTemplate, PromptTemplate

example_prompt = PromptTemplate.from_template("Question: {question} {answer}")
prompt = example_prompt.invoke({"question": "What is the capital of Italy?" "answer": "Rome"}) print(prompt.text)
Question: What is the capital of Italy? Rome
Entwickeln von LLM-Anwendungen mit LangChain

FewShotPromptTemplate

 

prompt_template = FewShotPromptTemplate(

examples=examples,
example_prompt=example_prompt,
suffix="Question: {input}",
input_variables=["input"]
)

 

 

  • examples: die Liste der Dictionaries
  • example_prompt: formatierte Vorlage
  • suffix: Suffix, das an die Eingabe angehängt wird
  • input_variables
Entwickeln von LLM-Anwendungen mit LangChain

Aufruf der Few-Shot Prompt-Vorlage

prompt = prompt_template.invoke({"input": "What is the name of Henry Campbell's dog?"})

print(prompt.text)
Question: Does Henry Campbell have any pets?
Henry Campbell has a dog called Pluto.
...

Question: What is the name of Henry Campbell's dog?
Entwickeln von LLM-Anwendungen mit LangChain

Zusammenfügen zu einer Kette

llm = ChatOpenAI(model="gpt-4o-mini", api_key="...")

llm_chain = prompt_template | llm response = llm_chain.invoke({"input": "What is the name of Henry Campbell's dog?"})
print(response.content)
The name of Henry Campbell's dog is Pluto.
Entwickeln von LLM-Anwendungen mit LangChain

Lass uns üben!

Entwickeln von LLM-Anwendungen mit LangChain

Preparing Video For Download...