बधाई हो!

Llama 3 के साथ काम करना

Imtihan Ahmed

Machine Learning Engineer

आइए याद करें

स्टेप 1 - Llama को लोकली चलाना

from llama_cpp import Llama

llm = Llama(model_path = "path/to/model.gguf")
Llama 3 के साथ काम करना

आइए याद करें

स्टेप 2 - पैरामीटर ट्यून करें

$$

  • temperature, top_k, top_p पैरामीटर
Llama 3 के साथ काम करना

आइए याद करें

स्टेप 3 - रोल असाइन करें

message_list = [{"role": "system", "content": system_message},
               {"role": "user", "content": user_message}]
Llama 3 के साथ काम करना

आइए याद करें

स्टेप 4 - आउटपुट गाइड करें

  • सटीक प्रॉम्प्ट्स
  • stop words
  • Zero-shot/Few-shot प्रॉम्प्टिंग
Llama 3 के साथ काम करना

आइए याद करें

स्टेप 5 - JSON रेस्पॉन्सेस एक्सप्लोर करें $$

response_format = {"type": "json_object"}
Llama 3 के साथ काम करना

आइए याद करें

स्टेप 6 - मल्टी-टर्न बातचीत बनाएँ

  • Conversation क्लास
  • .create_completion() मेथड
Llama 3 के साथ काम करना

आगे क्या?

Llama 3 के साथ काम करना

धन्यवाद!

Llama 3 के साथ काम करना

Preparing Video For Download...