¡Enhorabuena!

Trabajar con Llama 3

Imtihan Ahmed

Machine Learning Engineer

Recordemos

Paso 1: ejecuta Llama en local

from llama_cpp import Llama

llm = Llama(model_path = "path/to/model.gguf")
Trabajar con Llama 3

Recordemos

Paso 2: ajusta parámetros

$$

  • Parámetros temperature, top_k, top_p
Trabajar con Llama 3

Recordemos

Paso 3: asigna roles

message_list = [{"role": "system", "content": system_message},
               {"role": "user", "content": user_message}]
Trabajar con Llama 3

Recordemos

Paso 4: guía las salidas

  • Prompts precisos
  • Palabras de stop
  • Zero-shot/Few-shot prompting
Trabajar con Llama 3

Recordemos

Paso 5: explora respuestas JSON $$

response_format = {"type": "json_object"}
Trabajar con Llama 3

Recordemos

Paso 6: crea conversaciones multi-turno

  • Clase Conversation
  • Método .create_completion()
Trabajar con Llama 3

¿Qué sigue?

Trabajar con Llama 3

¡Gracias!

Trabajar con Llama 3

Preparing Video For Download...