डेटा से जुड़ी चिंताएँ और विचार

Large Language Models (LLMs) कॉन्सेप्ट्स

Vidhi Chugh

AI strategist and ethicist

डेटा से जुड़े विचार

 

डेटा से जुड़े विचार

 

  • डेटा वॉल्यूम और कंप्यूट पावर
  • डेटा क्वालिटी
  • लेबलिंग
  • बायस
  • प्राइवेसी
Large Language Models (LLMs) कॉन्सेप्ट्स

डेटा वॉल्यूम और कंप्यूट पावर

  • LLMs को बहुत डेटा चाहिए
    • बच्चे के बोलना सीखने जैसा
    • 570 GB, ~1.3 मिलियन किताबें

 

बोलना सीखता बच्चा

1 Freepik
Large Language Models (LLMs) कॉन्सेप्ट्स

डेटा वॉल्यूम और कंप्यूट पावर

  • LLMs को बहुत डेटा चाहिए
    • बच्चे के बोलना सीखने जैसा
    • 570 GB, ~1.3 मिलियन किताबें

 

  • भारी कंप्यूटिंग पावर; ऊर्जा खपत पर सोचें

 

  • लागत लाखों डॉलर तक हो सकती है!

बड़ा सर्वर से जुड़ा कंप्यूटर पर काम करता व्यक्ति

Large Language Models (LLMs) कॉन्सेप्ट्स

डेटा क्वालिटी

  • क्वालिटी डेटा अनिवार्य है

 

  • सटीक डेटा = बेहतर लर्निंग = बेहतर रिस्पॉन्स क्वालिटी = ज्यादा भरोसा

 

  • बच्चा बोलना सीख रहा है
    • बेकार-इन -> बेकार-आउट

अगर हम गलतियों या कमजोर व्याकरण वाले डेटा पर LLMs को ट्रेन करें तो आउटपुट घटिया होगा

Large Language Models (LLMs) कॉन्सेप्ट्स

लेबल्ड डेटा

  • सही डेटा लेबल: सटीक लर्निंग, पैटर्न जनरलाइज़, सटीक रिस्पॉन्स

  • मेहनत-भरा: हर आर्टिकल को सही लेबल देना

डेटा लेबल करने के लिए कंप्यूटर पर काम करती टीम

  • गलत लेबल मॉडल के प्रदर्शन को घटाते हैं
  • त्रुटियाँ सुलझाएँ: पहचानें -> विश्लेषण करें -> दोहराएँ
Large Language Models (LLMs) कॉन्सेप्ट्स

डेटा बायस

  • सामाजिक स्टीरियोटाइप का प्रभाव
  • ट्रेनिंग डेटा में विविधता की कमी
  • भेदभाव और अन्यायपूर्ण नतीजे

 

  • बायस्ड डेटा पहचानें और संभालें
    • डेटा असंतुलन जाँचें
    • विविधता बढ़ाएँ
    • बायस मिटिगेशन तकनीकें: अधिक विविध उदाहरण

डेटा बायस

  • उदाहरण:

    • "The nurse said that..." -> "she" या "her"
Large Language Models (LLMs) कॉन्सेप्ट्स

डेटा प्राइवेसी

  • डेटा प्रोटेक्शन और प्राइवेसी रेगुलेशंस का पालन

 

  • प्राइवेसी एक चिंता है
    • बिना अनुमति डेटा पर ट्रेनिंग उल्लंघन बन सकती है
    • कानूनी, वित्तीय और साख को नुकसान
  • संवेदनशील या व्यक्तिगत पहचान योग्य जानकारी (PII)

 

  • अनुमति लें

डेटा प्राइवेसी

Large Language Models (LLMs) कॉन्सेप्ट्स

अभ्यास करते हैं!

Large Language Models (LLMs) कॉन्सेप्ट्स

Preparing Video For Download...