Diskriminace modelu a dopad

Credit Risk Modeling in Python

Michael Crabtree

Data Scientist, Ford Motor Company

Matice záměn

  • Zobrazuje počet správných a nesprávných předpovědí pro každý loan_status

Matice záměn se vzorci

Credit Risk Modeling in Python

Recall selhání pro stav úvěru

  • Recall pro selhání (nebo citlivost) je podíl správně předpovězených skutečných selhání

Příklad klasifikačního reportu s recall pro selhání

Vzorec pro recall selhání

Credit Risk Modeling in Python

Dopad recallu na portfolio

  • Klasifikační report – podvýkonný model logistické regrese

Příklad klasifikačního reportu se zvýrazněním stavu úvěru

Credit Risk Modeling in Python

Dopad recallu na portfolio

  • Klasifikační report – podvýkonný model logistické regrese

Příklad klasifikačního reportu se zvýrazněním stavu úvěru

  • Počet skutečných selhání: 50 000
Výše úvěru Předpovězená / nepředpovězená selhání Odhadovaná ztráta ze selhání
$50 .04 / .96 (50000 x .96) x 50 = $2,400,000
Credit Risk Modeling in Python

Recall, přesnost a accuracy

  • Maximalizovat všechny najednou je obtížné kvůli vzájemným kompromisům

Graf recallu pro neselhání, selhání a přesnosti

Credit Risk Modeling in Python

Pojďme procvičovat!

Credit Risk Modeling in Python

Preparing Video For Download...