Đánh giá kết quả hồi quy logistic
Mô hình hóa rủi ro tín dụng bằng R
Lore Dirick
Manager of Data Science Curriculum at Flatiron School
Tóm tắt: đánh giá mô hình
test_set$loan_status model_prediction
... ...
[8066,] 1 1
[8067,] 0 0
[8068,] 0 0
[8069,] 0 0
[8070,] 0 0
[8071,] 0 1
[8072,] 1 0
[8073,] 1 1
[8074,] 0 0
[8075,] 0 0
[8076,] 0 0
[8077,] 1 1
[8078,] 0 0
[8079,] 0 1
... ...
Trạng thái khoản vay thực tế vs. dự đoán mô hình
| Không vỡ nợ (0) | Vỡ nợ (1) | |
|---|---|---|
| Không vỡ nợ (0) | 8 | 2 |
| Vỡ nợ (1) | 1 | 3 |
Thực tế là...
test_set$loan_status model_prediction
... ....
[8066,] 1 0.09881492
[8067,] 0 0.09497852
[8068,] 0 0.21071984
[8069,] 0 0.04252119
[8070,] 0 0.21110838
[8071,] 0 0.08668856
[8072,] 1 0.11319341
[8073,] 1 0.16662207
[8074,] 0 0.15299176
[8075,] 0 0.08558058
[8076,] 0 0.08280463
[8077,] 1 0.11271048
[8078,] 0 0.08987446
[8079,] 0 0.08561631
.... ....
Trạng thái khoản vay thực tế vs. dự đoán mô hình
| Không vỡ nợ (0) | Vỡ nợ (1) | |
|---|---|---|
| Không vỡ nợ (0) | ? | ? |
| Vỡ nợ (1) | ? | ? |
Thực tế là...
test_set$loan_status model_prediction
.... ....
[8066,] 1 0.09881492
[8067,] 0 0.09497852
[8068,] 0 0.21071984
[8069,] 0 0.04252119
[8070,] 0 0.21110838
[8071,] 0 0.08668856
[8072,] 1 0.11319341
[8073,] 1 0.16662207
[8074,] 0 0.15299176
[8075,] 0 0.08558058
[8076,] 0 0.08280463
[8077,] 1 0.11271048
[8078,] 0 0.08987446
[8079,] 0 0.08561631
.... ....
Giá trị ngưỡng (cutoff/threshold)
- Trong khoảng 0 đến 1
Ngưỡng = 0,5
test_set$loan_status model_prediction
... ...
[8066,] 1 0
[8067,] 0 0
[8068,] 0 0
[8069,] 0 0
[8070,] 0 0
[8071,] 0 0
[8072,] 1 0
[8073,] 1 0
[8074,] 0 0
[8075,] 0 0
[8076,] 0 0
[8077,] 1 0
[8078,] 0 0
[8079,] 0 0
... ...
Ngưỡng = 0,5
test_set$loan_status model_prediction
... ...
[8066,] 1 0
[8067,] 0 0
[8068,] 0 0
[8069,] 0 0
[8070,] 0 0
[8071,] 0 0
[8072,] 1 0
[8073,] 1 0
[8074,] 0 0
[8075,] 0 0
[8076,] 0 0
[8077,] 1 0
[8078,] 0 0
[8079,] 0 0
... ...
Trạng thái khoản vay thực tế vs. dự đoán mô hình
| Không vỡ nợ (0) | Vỡ nợ (1) | |
|---|---|---|
| Không vỡ nợ (0) | 10 | 0 |
| Vỡ nợ (1) | 4 | 0 |
$$
$\text{Độ nhạy} = 0/(4+0) = 0\%$
$\text{Độ chính xác} = 10/(10+4+0+0) = 71,4\%$
Ngưỡng = 0,1
test_set$loan_status model_prediction
... ...
[8066,] 1 0
[8067,] 0 0
[8068,] 0 0
[8069,] 0 0
[8070,] 0 0
[8071,] 0 0
[8072,] 1 0
[8073,] 1 0
[8074,] 0 0
[8075,] 0 0
[8076,] 0 0
[8077,] 1 0
[8078,] 0 0
[8079,] 0 0
... ...
Trạng thái khoản vay thực tế vs. dự đoán mô hình
| Không vỡ nợ (0) | Vỡ nợ (1) | |
|---|---|---|
| Không vỡ nợ (0) | 7 | 3 |
| Vỡ nợ (1) | 1 | 3 |
$$
$\text{Độ nhạy} = 3/(3+1) = 75\%$
$\text{Độ chính xác} = 10/(10+4+0+0) = 71,4\%$
Ayo berlatih!
Mô hình hóa rủi ro tín dụng bằng R
