Vì sao cần giám sát mô hình

Các khái niệm Giám sát Machine Learning

Hakim Elakhrass

Co-founder and CEO of NannyML

Học máy trong sản xuất

Quy trình phát triển điển hình

Sơ đồ mũi tên gồm bốn bước chính: xác định dự án, chuẩn bị dữ liệu, huấn luyện mô hình và triển khai.

Sau khi triển khai

Phiên bản cập nhật của quy trình phát triển khoa học dữ liệu, bổ sung một mũi tên cho bước giám sát sau triển khai. Ngoài ra, có các mũi tên nối giai đoạn giám sát với các bước chuẩn bị dữ liệu, huấn luyện mô hình và triển khai, cho phép cải tiến lặp dựa trên hiểu biết từ hiệu suất mô hình.

Các khái niệm Giám sát Machine Learning

Giảm rủi ro thất bại

Trường hợp của Zillow

Biển bán nhà đặt trước một căn nhà.

Lý do mô hình thất bại:

  • Lỗi phần mềm
  • Trôi dữ liệu đầu vào
  • Thay đổi quan hệ giữa đặc trưng và mục tiêu
Các khái niệm Giám sát Machine Learning

Tối đa hóa tác động kinh doanh

 

  • Tối ưu hóa mô hình theo mục tiêu kinh doanh

 

  • Giảm chi phí đám mây

 

Hình ảnh hiển thị kim tự tháp gồm sáu khối gỗ. Lớp đáy tạo KPI từ mỗi chữ cái trên từng khối. Các lớp còn lại thể hiện tăng trưởng, đạt mục tiêu và hiệu quả cao hơn.

Hình ảnh hiển thị logo đám mây, ghép từ chín khối gỗ.

Các khái niệm Giám sát Machine Learning

Nâng cao an toàn AI

Ba vấn đề an toàn:

  • Thiên vị – đầu ra công bằng cho các nhóm người dùng khác nhau

 

  • Tấn công đối nghịch – phát hiện thao túng dữ liệu đầu vào độc hại

 

  • Thiếu khả năng giải thích – hiểu cách mô hình ra quyết định

 

Hình ảnh cho thấy một khối gỗ có thước đo đang được đẩy lên, tượng trưng cho hệ thống công bằng hơn, giảm thiên vị.

Hình ảnh cho thấy một khối gỗ có ổ khóa đang được đẩy lên, tượng trưng cho bảo mật cao hơn.

Hình ảnh cho thấy một khối gỗ được đẩy lên, với các đường xuất phát từ hình cái đầu, thể hiện tăng hiểu biết về hệ thống trí tuệ.

Các khái niệm Giám sát Machine Learning

Thay đổi thế giới bằng dữ liệu

Quy trình tự động hóa

Hình ảnh cho thấy một dây chuyền sản xuất tự động.

Các khái niệm Giám sát Machine Learning

Ayo berlatih!

Các khái niệm Giám sát Machine Learning

Preparing Video For Download...