ROC křivka

Modelování kreditního rizika v R

Lore Dirick

Manager of Data Science Curriculum at Flatiron School

Dosud

Strategická tabulka/křivka: stále předpoklady
Který model je „celkově" nejlepší?

Matice záměn

$$

Skutečný stav úvěru vs. predikce modelu

	Neselhání (0)	Selhání (1)
Neselhání (0)	TN	FP
Selhání (1)	FN	TP

$$

$\text{Accuracy} = \frac{TP +TN}{TP + FP + TN + FN}$

$\text{Sensitivity} = \frac{TP}{TP + FN}$

$\text{Specificity} = \frac{TN}{TN + FP}$

Přesnost?

$$

Screen Shot 2020-06-22 at 6.21.14 PM.png

$$

$\text{Sensitivity} = \frac{TP}{TP + FN}$

$\text{Specificity} = \frac{TN}{TN + FP}$

ROC křivka

Screen Shot 2020-06-22 at 6.21.58 PM.png

$$

$\text{Sensitivity} = \frac{TP}{TP + FN}$

$\text{Specificity} = \frac{TN}{TN + FP}$

ROC křivka

Screen Shot 2020-06-22 at 6.22.11 PM.png

$$

$\text{Sensitivity} = \frac{TP}{TP + FN}$

$\text{Specificity} = \frac{TN}{TN + FP}$

ROC křivka

Screen Shot 2020-06-22 at 6.22.22 PM.png

$$

$\text{Sensitivity} = \frac{TP}{TP + FN}$

$\text{Specificity} = \frac{TN}{TN + FP}$

ROC křivka

Screen Shot 2020-06-22 at 6.22.35 PM.png

$$

$\text{Sensitivity} = \frac{TP}{TP + FN}$

$\text{Specificity} = \frac{TN}{TN + FP}$

ROC křivka

Screen Shot 2020-06-22 at 6.22.45 PM.png

$$

$\text{Sensitivity} = \frac{TP}{TP + FN}$

$\text{Specificity} = \frac{TN}{TN + FP}$

ROC křivka

Screen Shot 2020-06-22 at 6.22.54 PM.png

$$

$\text{Sensitivity} = \frac{TP}{TP + FN}$

$\text{Specificity} = \frac{TN}{TN + FP}$

Který je lepší?

Screen Shot 2020-06-22 at 6.23.06 PM.png

AUC ROC křivky A = 0.75
AUC ROC křivky B = 0.78

Pojďme si procvičit!

Modelování kreditního rizika v R

Preparing Video For Download...