Giai đoạn thẩm tra: chất lượng dữ liệu

AI cho Data Analyst

Andy Cotgreave

Author and Speaker, Former Technical Evangelist at Tableau

Thủ phạm thường gặp

Vấn đề chất lượng dữ liệu 1

AI cho Data Analyst

Bài toán khó mà AI mở khóa

Vấn đề chất lượng dữ liệu 2

AI cho Data Analyst

Bản ghi trùng mờ

 

  • Truyền thống: tự viết quy tắc, duy trì mãi
  • AI: viết logic khớp và mang hiểu biết ngữ nghĩa

 

  • Đầu ra → truy vấn hoặc nhóm bạn có thể đọc và chỉnh

Bản ghi trùng mờ

AI cho Data Analyst

Vi phạm thứ tự thời gian

Thứ tự thời gian

  • Truyền thống: viết SQL so sánh timestamp
  • AI: mô tả điều không nên xảy ra → AI viết truy vấn
AI cho Data Analyst

Không nhất quán logic

Không nhất quán logic

 

  • Truyền thống: bảng tham chiếu — cần người duy trì
  • AI: tri thức thế giới, không cần dữ liệu tham chiếu
AI cho Data Analyst

Thẩm tra kết quả của AI

 

  • AI không phải phép màu — nó tạo truy vấn, mã, hoặc quy tắc
  • Kết quả có thể sai: regex kém, quy tắc nghiệp vụ bịa

Thẩm tra AI

AI cho Data Analyst

Khắc phục vấn đề

Dữ liệu sạch 1

Dữ liệu sạch 2

AI cho Data Analyst

Luyện tập nào!

AI cho Data Analyst

Preparing Video For Download...