Strategii avansate de prompting

Introducere în Amazon Bedrock

Nikhil Rangarajan

Data Scientist

Arhitectura de prompting

Prompturile de sistem stabilesc stilul și abordarea
Prompturile chain-of-thought oferă un cadru de rezolvare a problemelor
Prompturile few-shot furnizează exemple
Fiecare nivel consolidează înțelegerea, sporind fiabilitatea

Un grafic cu patru roți dințate conectate, ilustrând secvența arhitecturii de prompting: Prompt de sistem, Pași chain-of-thought, Exemple few-shot și Solicitare de conținut.

Prompturi de sistem și controlul stilului

prompt_template = {
    "system_prompt": f"""System: Write in a professional but approachable tone.""",

    "content_type": "blog_post",

    "examples": [
        {
            "title": "Cloud Migration Basics",
            "content": "Moving to the cloud doesn't have to be complex..."
        }
    ],

    "task": f"Write a blog post about {topic}"

}

Prompting chain-of-thought

def generate_message_content(text_data):
    steps = [
        "1. Understand the target audience",
        "2. Outline key points",
        "3. Draft a promotional email"
    ]

    text_data["text"] += f"\nSteps:{' '.join(steps)}"

    return text_data

💡 Ghidează procesul de gândire al modelului

Adaptarea conținutului și parametrii

parameters = {

    "blog_post": {"temperature": 0.7, "top_p": 0.9},
    "social_media": {"temperature": 0.8, "top_p": 0.95},

    "technical": {"temperature": 0.4, "top_p": 0.8}

}

content_type = "blog_post"
prompt_data["parameters"] = parameters[content_type]

Ajustați parametrii în funcție de tipul de conținut
Presetări de parametri pentru consistență

Generarea prompturilor cu șabloane

# Write the prompt
topic = "Cloud Security"
content_type = "blog_post"
prompt = f"Write a {topic} blog post. Use this example: {prompt_template["examples"][0]}"


# Define the parameters
temperature = parameters[content_type]["temperature"]
top_p = parameters[content_type]["top_p"]


# Call the model
response = bedrock.invoke_model(modelId=model_id, body=json.dumps({"messages": 
           [{"role": "user","content": [{"type": "text", "text": prompt}]}],
           "temperature": temperature, "top_p": top_p}))

Să exersăm!

Introducere în Amazon Bedrock