Tính bền vững và phạm vi của bảng

Quản lý dữ liệu trong Databricks

Smriti Mishra

Founder, NordData Insight

Tính bền vững của bảng là gì?

  • Tính bền vững của bảng điều khiển lưu trữ và lưu giữ dữ liệu
  • Ảnh hưởng đến lưu trữ, truy cập, và bảo trì
  • Databricks hỗ trợ bảng được quản lý và không được quản lý

Hình minh họa mọi người lưu trữ và xem xét tệp trong tủ hồ sơ

Quản lý dữ liệu trong Databricks

Bảng được quản lý trong Databricks

  • Do Databricks quản lý hoàn toàn, gồm vị trí dữ liệu và vòng đời.
  • Tự động xóa dữ liệu khi xóa bảng.
  • Phù hợp cho quản lý dữ liệu tập trung, đơn giản.

Hình mô tả hệ thống tập trung với các chấm màu khác nhau

Quản lý dữ liệu trong Databricks

Bảng không được quản lý trong Databricks

  • Cách tiếp cận phi tập trung
  • Tự kiểm soát vị trí lưu trữ và vòng đời dữ liệu
  • Xóa bảng không được quản lý không xóa dữ liệu
  • Hữu ích cho lưu trữ tùy chỉnh hoặc yêu cầu tuân thủ

Hình mô tả hệ thống phi tập trung với các chấm màu khác nhau

Quản lý dữ liệu trong Databricks

Bảng được quản lý hay không được quản lý?

Aspect.png

Quản lý dữ liệu trong Databricks

Từ khóa LOCATION

  • Cần thiết để thiết lập lưu trữ dữ liệu cho bảng không được quản lý.
  • Vị trí lưu trữ ảnh hưởng chi phí, thời gian truy xuất, và chính sách lưu giữ.

 

CREATE TABLE table_name (
    column_name data_type,
    ...
)
USING file_format
LOCATION 'path/to/data';
Quản lý dữ liệu trong Databricks

Điểm chính

  • Bảng được quản lý tập trung hóa lưu trữ và vòng đời trong Databricks.
  • Bảng không được quản lý linh hoạt về lưu trữ và vòng đời dữ liệu.
  • Chọn theo nhu cầu lưu trữ, quyền kiểm soát, và quản trị.

Hình mô tả quản lý lưu trữ và vòng đời dữ liệu

Quản lý dữ liệu trong Databricks

Ayo berlatih!

Quản lý dữ liệu trong Databricks

Preparing Video For Download...