Databricks Lakehouse Platform की मुख्य विशेषताएँ

Databricks कॉन्सेप्ट्स

Kevin Barlow

Data Practitioner

Apache Spark

Apache Spark एक ओपन-सोर्स डेटा प्रोसेसिंग फ्रेमवर्क है और Databricks का मूल इंजन है.

DataCamp Courses

  • Introduction to Pyspark
  • Big Data Fundamentals with Pyspark
  • Cleaning Data with Pyspark
  • Machine Learning with Pyspark
  • Introduction to Spark SQL in Python
Databricks कॉन्सेप्ट्स

Spark के फायदे

मुख्य लाभ:

  1. एक्स्टेंसिबल, लचीला ओपन-सोर्स फ्रेमवर्क
  2. बड़ा डेवलपर समुदाय
  3. उच्च प्रदर्शन
  4. Databricks के ऑप्टिमाइज़ेशन

Spark Cluster Diagram

1 https://spark.apache.org/docs/latest/cluster-overview.html
Databricks कॉन्सेप्ट्स

क्लाउड कंप्यूटिंग का आधार

क्लासिक कंप्यूटिंग

क्लाउड कंप्यूटिंग

Databricks कॉन्सेप्ट्स

Databricks Compute

क्लस्टर्स

  • कम्प्यूट संसाधनों का समूह
  • सभी वर्कलोड, कोई भी यूज़ केस
  • ऑल-पर्पज़ बनाम Jobs

Databricks Supported Languages

SQL Warehouses

  • केवल SQL
  • BI यूज़ केस
  • Photon

SQL Language

Databricks कॉन्सेप्ट्स

क्लाउड डेटा स्टोरेज

क्लाउड डेटा स्टोरेज - DB

क्लाउड डेटा स्टोरेज - फाइल्स

Databricks कॉन्सेप्ट्स

Delta

Delta Lake logo

Delta एक ओपन-सोर्स डेटा स्टोरेज फाइल फॉर्मेट है, और यह देता है:

  • ACID ट्रांज़ैक्शंस
  • यूनिफाइड बैच और स्ट्रीमिंग
  • स्कीमा इवोल्यूशन
  • टेबल हिस्ट्री
  • टाइम-ट्रैवल
1 delta.io
Databricks कॉन्सेप्ट्स

Unity Catalog

Unity Catalog Databricks Lakehouse प्लेटफॉर्म में सभी डेटा एसेट्स की एक्सेस नियंत्रित करने के लिए एक ओपन डेटा गवर्नेंस रणनीति है.

  • एक्सेस कंट्रोल के लिए SQL GRANT, REVOKE स्टेटमेंट्स
  • गवर्नेंस के लिए सरल इंटरफेस

Data Catalog

Databricks कॉन्सेप्ट्स

Databricks UI

आपके डेटा वर्कलोड के आधार पर क्षमताओं तक आसान पहुँच के लिए डिज़ाइन किया गया.

  • सभी यूज़र्स को डेटा और कम्प्यूट की पहुँच
  • SQL यूज़र्स को क्वेरी और रिपोर्ट्स के लिए परिचित इंटरफेस
  • डेटा इंजीनियर्स Delta Live Tables का लाभ उठाएँ
  • Machine Learning वर्कलोड्स मॉडल्स, फीचर्स आदि का उपयोग करें

Databricks Menu

Databricks कॉन्सेप्ट्स

आइए रिव्यू करें!

Databricks कॉन्सेप्ट्स

Preparing Video For Download...