Kho dữ liệu và hồ dữ liệu

Tìm hiểu Data Engineering

Hadrien Lacroix

Content Developer

Kho nhìn ra hồ tuyệt đẹp

Tìm hiểu Data Engineering

đường ống dữ liệu

Tìm hiểu Data Engineering

Hồ dữ liệu và kho dữ liệu

Hồ dữ liệu

  • Lưu toàn bộ dữ liệu thô
  • Có thể tới petabyte (1 triệu GB)
  • Lưu mọi cấu trúc dữ liệu
  • Tiết kiệm chi phí
  • Khó phân tích
  • Cần danh mục dữ liệu luôn cập nhật
  • Dùng bởi nhà khoa học dữ liệu
  • Big data, phân tích thời gian thực

Kho dữ liệu

  • Dữ liệu cụ thể cho mục đích cụ thể
  • Tương đối nhỏ
  • Chủ yếu lưu dữ liệu có cấu trúc
  • Cập nhật tốn kém hơn
  • Tối ưu cho phân tích dữ liệu
  • Cũng dùng bởi nhà phân tích dữ liệu và phân tích kinh doanh
  • Truy vấn tùy biến, chỉ đọc
Tìm hiểu Data Engineering

Danh mục dữ liệu cho hồ dữ liệu

  • Nguồn dữ liệu này là gì?
  • Dữ liệu này được dùng ở đâu?
  • Ai sở hữu dữ liệu?
  • Dữ liệu được cập nhật bao lâu một lần?
  • Thực hành tốt về quản trị dữ liệu
  • Đảm bảo tái lập
  • Không có danh mục --> đầm lầy dữ liệu
  • Thực hành tốt cho mọi giải pháp lưu trữ dữ liệu
    • Độ tin cậy
    • Tự chủ
    • Khả năng mở rộng
    • Tốc độ
Tìm hiểu Data Engineering

CSDL vs. kho dữ liệu

  • Cơ sở dữ liệu:
    • Thuật ngữ chung
    • Định nghĩa lỏng: dữ liệu được tổ chức, lưu và truy cập trên máy tính
  • Kho dữ liệu là một loại cơ sở dữ liệu
Tìm hiểu Data Engineering

Tóm tắt

  • Hồ dữ liệu
  • Kho dữ liệu
  • Cơ sở dữ liệu
  • Danh mục dữ liệu
Tìm hiểu Data Engineering

Hãy thực hành!

Tìm hiểu Data Engineering

Preparing Video For Download...