Tworzenie tabel i zarządzanie nimi

Zarządzanie danymi w Databricks

Smriti Mishra

Founder, NordData Insight

Biblioteka danych

Tworzenie i zarządzanie

• Bazy danych Databricks grupują powiązane tabele.
• Tworzenie bazy danych ustanawia skalowalną strukturę.
• Zorganizowane dane ułatwiają dostęp i zarządzanie.
• Tabele przechowują dane strukturalne do zapytań.

Efektywne zarządzanie

• Efektywne zarządzanie obejmuje zapytania, aktualizacje i usuwanie danych.
• Usuwanie należy przeprowadzać ostrożnie, aby uniknąć utraty danych.
• Bezpieczne usuwanie wymaga wcześniejszego wykonania kopii zapasowej.

Użycie słowa kluczowego LOCATION

• Databricks automatycznie zarządza lokalizacjami przechowywania tabel.
• Domyślna konfiguracja upraszcza zarządzanie danymi.
• Niestandardowe ścieżki można ustawić słowem kluczowym LOCATION.
• Elastyczność jest ważna dla zgodności, kosztów lub wydajności.

Nadpisywanie domyślnego miejsca przechowywania

• LOCATION zastępuje domyślne miejsce przechowywania.
• Przechowywanie danych w zewnętrznych lokalizacjach chmury:
  • przykłady: AWS S3, Azure Blob Storage
• Przydatne przy integracji z istniejącą infrastrukturą.
• Zapewnia zgodność dla danych wrażliwych.

Dynamiczne zarządzanie danymi

• LOCATION wspiera dynamiczne zarządzanie danymi.
• Łatwe przenoszenie danych przy zmianie przepisów lub kosztów.
• Bezproblemowa relokacja danych bez zakłóceń.
• Zachowanie struktury i przepływu pracy podczas zmian.

Czas na ćwiczenia!

Zarządzanie danymi w Databricks