डेटा इंटेलिजेंस प्लेटफ़ॉर्म - डेटा

Databricks परिचय

Kevin Barlow

Data Analytics Practitioner

संस्थाएँ डेटा मैनेजमेंट की परवाह क्यों करती हैं?

सुरक्षा और संरक्षा

डेटा सुरक्षा

डेटा में भरोसा

आत्मविश्वासी एनालिटिक्स

Databricks परिचय

डेटा के प्रकार

स्ट्रक्चर्ड
  • सबसे आम और समझने में आसान
  • सामान्य पंक्तियाँ और कॉलम
  • उदाहरण:
    • डेटाबेस टेबल्स
    • .csv
    • Parquet
    • Delta
id name occupation location
1 Kevin Data Scientist California
2 Tom Architect Arizona
3 Sally Lawyer Texas
4 Tina Surgeon Florida
5 Joe Engineer New York
Databricks परिचय

डेटा के प्रकार

सेमी-स्ट्रक्चर्ड
  • वेब-आधारित डिवाइसेस में आम
  • कुछ संरचना, कंटेंट में अधिक लचीलापन
  • उदाहरण:
    • JSON
    • XML
    • HTML
{
  "people": [{
      "id": 1,
      "name": "Kevin",
      "occupation": "Data Scientist",
      "location": "California"},
    {
      "id": 2,
      "name": "Tom",
      "occupation": "Architect",
      "location": "Arizona"}]
}
Databricks परिचय

डेटा के प्रकार

अनस्ट्रक्चर्ड
  • स्मार्ट डिवाइस, कैमरा आदि में आम
  • कम संरचना, जानकारी-समृद्ध
  • उदाहरण:
    • JPEG
    • PNG
    • MP4
    • PDF
    • DOC

अनस्ट्रक्चर्ड डेटा डायग्राम

Databricks परिचय

Delta

delta.io

  • ओपन-सोर्स स्टोरेज फॉर्मेट
  • Parquet टेबल्स का संग्रह
  • JSON ट्रांज़ैक्शन लॉग
  • पूर्णतः ACID कम्प्लायंट
  • बैच और स्ट्रीमिंग डेटासेट्स

डेल्टा लेक

Databricks परिचय

Unity Catalog

यूनिटी कैटलॉग डेटा मॉडल

1 https://docs.databricks.com/en/data-governance/unity-catalog/index.html#the-unity-catalog-object-model
Databricks परिचय

Unity Catalog

यूनिटी कैटलॉग डेटा मॉडल

GRANT, SHOW, REVOKE, USE ...

Databricks परिचय

Catalog Explorer

  • सभी डेटा एसेट्स को एक्सप्लोर करने के लिए एक ही स्थान
  • डेटा खोजने के लिए UI
  • Unity Catalog परमिशन मैनेज करें
  • डेटा लिनेएज और संबंधित एसेट्स देखें

कैटलॉग एक्सप्लोरर स्क्रीनशॉट

Databricks परिचय

अभ्यास करते हैं!

Databricks परिचय

Preparing Video For Download...