Giới thiệu về xử lý theo lô

Các khái niệm về Streaming

Mike Metzger

Data Engineer

Xử lý theo lô là gì?

• Xử lý dữ liệu theo nhóm
• Chạy từ đầu quy trình đến cuối
  • Không thêm dữ liệu giữa chừng
• Thường chạy do
  • khoảng thời gian
  • sự kiện khởi động
• Xử lý theo kích thước nhất định (kích thước lô)
• Một phiên xử lý theo lô thường gọi là một job

Kịch bản xử lý theo lô phổ biến

• Đọc tệp hoặc phần tệp (văn bản, mp3, v.v.)
• Gửi / nhận email
• In ấn

Vì sao dùng xử lý theo lô?

• Đơn giản
• Thường ổn định
• Nhiều cách cải thiện hiệu năng

Cùng luyện tập!

Các khái niệm về Streaming