डेटा वेयरहाउस और डेटा लेक

डेटा इंजीनियरिंग को समझना

Hadrien Lacroix

Content Developer

लेक के नज़ारे वाले वेयरहाउस

डेटा इंजीनियरिंग को समझना

pipeline

डेटा इंजीनियरिंग को समझना

डेटा लेक और डेटा वेयरहाउस

डेटा लेक

  • सारा कच्चा डेटा स्टोर करता है
  • पेटाबाइट्स (1 million GBs) तक हो सकता है
  • सभी डेटा संरचनाएँ स्टोर करता है
  • लागत-कुशल
  • विश्लेषण करना कठिन
  • अप-टू-डेट डेटा कैटलॉग आवश्यक
  • डेटा साइंटिस्ट इसे उपयोग करते हैं
  • बिग डेटा, रियल-टाइम एनालिटिक्स

डेटा वेयरहाउस

  • विशेष उपयोग के लिए विशेष डेटा
  • अपेक्षाकृत छोटा
  • मुख्यतः स्ट्रक्चर्ड डेटा स्टोर करता है
  • अपडेट करना अधिक महंगा
  • डेटा विश्लेषण के लिए ऑप्टिमाइज़्ड
  • डेटा एनालिस्ट और बिज़नेस एनालिस्ट भी उपयोग करते हैं
  • एड-हॉक, रीड-ओनली क्वेरीज़
डेटा इंजीनियरिंग को समझना

डेटा लेक के लिए डेटा कैटलॉग

  • इस डेटा का स्रोत क्या है?
  • यह डेटा कहाँ उपयोग होता है?
  • डेटा का मालिक कौन है?
  • यह डेटा कितनी बार अपडेट होता है?
  • डेटा गवर्नेंस के लिए अच्छी प्रैक्टिस
  • पुनरुत्पादनीयता सुनिश्चित होती है
  • कैटलॉग नहीं है --> डेटा स्वैम्प
  • किसी भी डेटा स्टोरेज समाधान के लिए अच्छी प्रैक्टिस
    • विश्वसनीयता
    • स्वायत्तता
    • स्केलेबिलिटी
    • स्पीड
डेटा इंजीनियरिंग को समझना

डेटाबेस बनाम डेटा वेयरहाउस

  • डेटाबेस:
    • सामान्य शब्द
    • ढीले तौर पर परिभाषित: कंप्यूटर पर संगठित डेटा, जिसे स्टोर किया गया है और एक्सेस किया जाता है
  • डेटा वेयरहाउस, डेटाबेस का एक प्रकार है
डेटा इंजीनियरिंग को समझना

सारांश

  • डेटा लेक
  • डेटा वेयरहाउस
  • डेटाबेस
  • डेटा कैटलॉग
डेटा इंजीनियरिंग को समझना

अभ्यास करते हैं!

डेटा इंजीनियरिंग को समझना

Preparing Video For Download...