La curva ROC

Credit Risk Modeling in R

Lore Dirick

Manager of Data Science Curriculum at Flatiron School

Finora

  • Tabella/curva di strategia: ancora ipotesi
  • Qual è il modello "migliore" in assoluto?
Credit Risk Modeling in R

Matrice di confusione

$$

Stato effettivo del prestito vs. previsione del modello

Nessun default (0) Default (1)
Nessun default (0) TN FP
Default (1) FN TP

$$

$\text{Accuratezza} = \frac{TP +TN}{TP + FP + TN + FN}$

$\text{Sensibilità} = \frac{TP}{TP + FN}$

$\text{Specificità} = \frac{TN}{TN + FP}$

Credit Risk Modeling in R

Accuratezza?

$$

Schermata 22-06-2020 alle 18.21.14.png

$$

$\text{Sensibilità} = \frac{TP}{TP + FN}$

$\text{Specificità} = \frac{TN}{TN + FP}$

Credit Risk Modeling in R

La curva ROC

Schermata 22-06-2020 alle 18.21.58.png

$$

$\text{Sensibilità} = \frac{TP}{TP + FN}$

$\text{Specificità} = \frac{TN}{TN + FP}$

Credit Risk Modeling in R

La curva ROC

Schermata 22-06-2020 alle 18.22.11.png

$$

$\text{Sensibilità} = \frac{TP}{TP + FN}$

$\text{Specificità} = \frac{TN}{TN + FP}$

Credit Risk Modeling in R

La curva ROC

Schermata 22-06-2020 alle 18.22.22.png

$$

$\text{Sensibilità} = \frac{TP}{TP + FN}$

$\text{Specificità} = \frac{TN}{TN + FP}$

Credit Risk Modeling in R

La curva ROC

Schermata 22-06-2020 alle 18.22.35.png

$$

$\text{Sensibilità} = \frac{TP}{TP + FN}$

$\text{Specificità} = \frac{TN}{TN + FP}$

Credit Risk Modeling in R

La curva ROC

Schermata 22-06-2020 alle 18.22.45.png

$$

$\text{Sensibilità} = \frac{TP}{TP + FN}$

$\text{Specificità} = \frac{TN}{TN + FP}$

Credit Risk Modeling in R

La curva ROC

Schermata 22-06-2020 alle 18.22.54.png

$$

$\text{Sensibilità} = \frac{TP}{TP + FN}$

$\text{Specificità} = \frac{TN}{TN + FP}$

Credit Risk Modeling in R

Qual è migliore?

Schermata 22-06-2020 alle 18.23.06.png

  • AUC curva ROC A = 0.75
  • AUC curva ROC B = 0.78
Credit Risk Modeling in R

Passons à la pratique !

Credit Risk Modeling in R

Preparing Video For Download...