Kiểm định tương quan

Nền tảng Suy luận trong Python

Paul Savala

Assistant Professor of Mathematics

Tương quan

Mối quan hệ thống kê giữa hai biến

Hai đường hình sin xấp xỉ tương quan.

Nền tảng Suy luận trong Python

Giá thuê ở Chicago

Biểu đồ đường: trục x là ngày, trục y là tiền thuê đã chuẩn hóa; đường giảm 2011–2012 rồi tăng 2012–2017.

1 https://www.zillow.com/research/data/
Nền tảng Suy luận trong Python

Giá thuê: Chicago so với USA

Biểu đồ đường: trục x là ngày, trục y là tiền thuê đã chuẩn hóa; hai đường cho Chicago và trung bình USA di chuyển cùng nhau.

Nền tảng Suy luận trong Python

Hệ số R của Pearson trong SciPy

r, p_value = stats.pearsonr(chicago_rents, usa_rents)


print(r)

0.939

print(p_value < 0.05)

TRUE

Kết luận: Giá thuê giữa USA và Chicago có tương quan

Nền tảng Suy luận trong Python

Phương sai giải thích

$R^2:$ Phần trăm phương sai được giải thích

print(r**2)

0.883
  • 88,3% biến thiên tiền thuê ở Chicago được giải thích bởi tiền thuê ở USA

Biểu đồ phân tán: trục x là tiền thuê trung bình USA, trục y là tiền thuê Chicago, có xu hướng tuyến tính dương.

Nền tảng Suy luận trong Python

Suy luận từ tương quan

  • Yếu tố riêng của Chicago?
    • Cơ hội việc làm?
    • Thời tiết?
    • Thuế?
    • Khác?
  • Mục tiêu: Giải thích phần biến thiên còn lại không do tiền thuê USA giải thích
Nền tảng Suy luận trong Python

Hạn chế của tương quan

  • Dữ liệu tương quan thì không độc lập
  • Vi phạm giả định của một số kiểm định giả thuyết
  • Dữ liệu có thể tương quan với chính nó

Biểu đồ đường: trục x là ngày, trục y là tiền thuê đã chuẩn hóa; đường giảm 2011–2012 rồi tăng 2012–2017.

Nền tảng Suy luận trong Python

Tự tương quan

  • Tự tương quan: Tương quan với các đo lường trước đó
  • Giá thuê có xu hướng tương quan với giá một năm trước

Biểu đồ phân tán: trục x là giá thuê Chicago, trục y là giá thuê Chicago trước đó 1 năm, xu hướng tuyến tính dương.

Nền tảng Suy luận trong Python

Ayo berlatih!

Nền tảng Suy luận trong Python

Preparing Video For Download...