LLMOps का ओवरव्यू

LLMOps Concepts

Max Knobbout, PhD

Applied Scientist, Uber

इस कोर्स में आप क्या सीखेंगे

अपनी डेस्क पर पढ़ती हुई किताब का एक मज़ेदार चित्र

 

  • LLMOps बड़े भाषा मॉडल ऐप्स को प्रभावी रूप से manage, deploy, और maintain करने में मदद करता है
  • हम कवर करेंगे:
    • Fundamentals
    • LLM ऐप्स का लाइफसाइकल
    • चुनौतियाँ और विचार
1 Illustrations by Manfred Steger @ Pixabay
LLMOps Concepts

LLMs का रिकैप

 

 

LLMs क्या हैं?
  • 📚 व्यापक टेक्स्ट डेटा पर प्रशिक्षित
  • 🧠 मानव-जैसा टेक्स्ट समझ और जनरेट कर सकते हैं
  • 💡 AI में एक बड़ी प्रगति दर्शाते हैं

 

 

इन्हें क्या अलग बनाता है?
  • 🏋️ आमतौर पर प्री-ट्रेंड
  • 🐘 बहुत बड़े पैरामीटर्स
  • 💻 भारी compute संसाधन
  • 🎲 अनपेक्षित व्यवहार
LLMOps Concepts

शुरू कैसे हुआ...

  • क्वेरीज़ सीधे मॉडल में दी जाती थीं
  • फोकस मॉडल चलाने पर था
  • केवल फाइन-ट्यूनिंग पर डेटा जोड़ा जाता था

एक साधारण पाइपलाइन जिसमें एक क्वेरी LLM में जाती है और आउटपुट बनता है

LLMOps Concepts

... और अब कहाँ है

  • टेक्स्ट जनरेशन से पहले संगठनात्मक डेटा का इंटीग्रेशन
  • चरणों में डेटा प्रोसेसिंग और मैनिपुलेशन शामिल हो सकते हैं
  • एक या कई मॉडल कॉल्स, टेक्स्ट, इमेज, या मल्टी-मोडल के लिए

इससे बनते हैं जिन्हें हम इस कोर्स में LLM applications कहेंगे

एक जटिल LLM पाइपलाइन का चित्र

LLMOps Concepts

LLMOps की ज़रूरत

 

 

सीमलेस इंटीग्रेशन

LLMOps Concepts

LLMOps की ज़रूरत

 

 

लाइफसाइकल के सुगम बदलाव

LLMOps Concepts

LLMOps की ज़रूरत

 

 

कुशल, स्केलेबल प्रबंधन

LLMOps Concepts

LLMOps बनाम MLOps

LLMOps Concepts

LLMOps बनाम MLOps

कुछ अंतर:

LLMOps MLOps
Model size बड़ा आमतौर पर छोटा
Data टेक्स्ट कोई भी डेटा
Pre-trained models अक्सर हाँ अक्सर नहीं
Model improvement प्रॉम्प्ट इंजीनियरिंग और फाइन-ट्यूनिंग फीचर इंजीनियरिंग और मॉडल चयन
Generalization जनरल-पर्पज़ निश्चित स्कोप
Unpredictability अधिक कम
Output मुख्यतः टेक्स्ट टास्क-विशिष्ट
LLMOps Concepts

अभ्यास करते हैं!

LLMOps Concepts

Preparing Video For Download...