Perzistence a rozsah tabulek

Správa dat v Databricks

Smriti Mishra

Founder, NordData Insight

Co je perzistence tabulky?

  • Perzistence tabulky řídí ukládání a uchovávání dat
  • Ovlivňuje úložiště, přístup a údržbu
  • Databricks podporuje spravované i nespravované tabulky

Kreslený obrázek lidí ukládajících a prohlížejících soubory v archivních skříních

Správa dat v Databricks

Spravované tabulky v Databricks

  • Plně spravováno Databricks, včetně umístění dat a životního cyklu.
  • Při smazání tabulky jsou data automaticky odstraněna.
  • Vhodné pro jednoduchou, centralizovanou správu dat.

Obrázek znázorňující fungování centralizovaného systému pomocí barevných teček

Správa dat v Databricks

Nespravované tabulky v Databricks

  • Decentralizovaný přístup
  • Kontrola nad umístěním úložiště a životním cyklem dat
  • Smazání nespravované tabulky nesmaže data
  • Vhodné pro vlastní úložiště nebo požadavky na dodržování předpisů

Obrázek znázorňující fungování decentralizovaného systému pomocí barevných teček

Správa dat v Databricks

Spravované, nebo nespravované tabulky?

Aspect.png

Správa dat v Databricks

Klíčové slovo LOCATION

  • Nezbytné pro nastavení úložiště nespravovaných tabulek.
  • Umístění úložiště ovlivňuje náklady, dobu přístupu a zásady uchovávání.

 

CREATE TABLE table_name (
    column_name data_type,
    ...
)
USING file_format
LOCATION 'path/to/data';
Správa dat v Databricks

Klíčové poznatky

  • Spravované tabulky centralizují úložiště a životní cyklus v Databricks.
  • Nespravované tabulky nabízejí flexibilitu úložiště a životního cyklu dat.
  • Volba závisí na požadavcích na úložiště, správu a řízení dat.

Obrázek znázorňující správu úložiště a životního cyklu dat

Správa dat v Databricks

Pojďme procvičovat!

Správa dat v Databricks

Preparing Video For Download...