Постоянство и область видимости таблиц

Управление данными в Databricks

Smriti Mishra

Founder, NordData Insight

Что такое постоянство таблиц?

Cartoon image of people storing and reviewing files in cabinets

Databricks полностью управляет таблицей: расположением данных и их жизненным циклом.
При удалении таблицы данные удаляются автоматически.
Подходит для простого централизованного управления данными.

Image depicting how a centralized system works using different colored dots

Image depicting how a decentralized system works using different colored dots

Необходимо для указания места хранения данных в неуправляемых таблицах.
Расположение хранилища влияет на стоимость, скорость доступа и политики хранения.

CREATE TABLE table_name (
    column_name data_type,
    ...
)
USING file_format
LOCATION 'path/to/data';

Управляемые таблицы централизуют хранение и жизненный цикл данных в Databricks.
Неуправляемые таблицы обеспечивают гибкость хранения и управления жизненным циклом.
Выбор зависит от требований к хранению, контролю и управлению данными.

Image depicting the storage and lifecycle management of data

Управление данными в Databricks