Administrarea unui spațiu de lucru Databricks

Concepte Databricks

Kevin Barlow

Data Practitioner

Administrator de cont

Responsabilități principale:

Crearea și gestionarea spațiilor de lucru
Activarea Unity Catalog
Gestionarea identităților
Gestionarea abonamentului contului

Captură de ecran Consolă de cont

Consola de cont

Captură de ecran Consolă de cont

https://accounts.cloud.databricks.com/

Consola de cont - Spații de lucru

Spații de lucru în Consola de cont

https://accounts.cloud.databricks.com/

Consola de cont - Date

Date în Consola de cont

https://accounts.cloud.databricks.com/

Consola de cont - Utilizatori și grupuri

Utilizatori în Consola de cont

https://accounts.cloud.databricks.com/

Consola de cont - Setări

Setări în Consola de cont

https://accounts.cloud.databricks.com/

Administrator spațiu de lucru

Responsabilități principale:

Gestionarea identităților în spațiul de lucru
Crearea și gestionarea resurselor de calcul
Gestionarea funcțiilor și setărilor spațiului de lucru

Setări administrator spațiu de lucru

Planul de date

Conține toate resursele clientului necesare pentru calcul în Databricks.

Datele sunt stocate în mediul cloud al clientului
Clusterele / SQL Warehouses rulează în zona cloud a clientului.

Planul de date Databricks

Planul de control

Partea platformei gestionată și găzduită de Databricks.

Orchestrează diverse sarcini de fundal în Databricks
Trimite cereri către Planul de date pentru a crea clustere, a rula joburi etc.

Planul de control Databricks

Arhitectura platformei Databricks

Fiecare platformă cloud oferă aceleași opțiuni generale pentru crearea unui spațiu de lucru:

Marketplace-ul furnizorului de servicii cloud
Consola de cont
Utilizând API-ul Accounts din Databricks
Implementare programatică (ex.: Terraform)

Arhitectura platformei Databricks

¹ https://docs.databricks.com/getting-started/overview.html

Să recapitulăm!

Concepte Databricks

Preparing Video For Download...