Modelldiskriminering och påverkan

Kreditriskmodellering i Python

Michael Crabtree

Data Scientist, Ford Motor Company

Förvirringsmatriser

  • Visar antalet korrekta och felaktiga prediktioner för varje loan_status

Förvirringsmatris med formler

Kreditriskmodellering i Python

Default-recall för lånestatus

  • Default-recall (eller känslighet) är andelen verkliga defaults som förutsägs

Exempel på klassificeringsrapport med default-recall

Formel för default-recall

Kreditriskmodellering i Python

Recall-påverkan på portföljen

  • Klassificeringsrapport – underpresterande logistisk regressionsmodell

Exempel på klassificeringsrapport med markerad lånestatus

Kreditriskmodellering i Python

Recall-påverkan på portföljen

  • Klassificeringsrapport – underpresterande logistisk regressionsmodell

Exempel på klassificeringsrapport med markerad lånestatus

  • Antal verkliga defaults: 50 000
Lånebelopp Defaults förutsagda / ej förutsagda Beräknad förlust på defaults
$50 .04 / .96 (50000 x .96) x 50 = $2 400 000
Kreditriskmodellering i Python

Recall, precision och träffsäkerhet

  • Svårt att maximera alla samtidigt på grund av en avvägning

Graf över icke-default-recall med default-recall och träffsäkerhet

Kreditriskmodellering i Python

Nu kör vi en övning!

Kreditriskmodellering i Python

Preparing Video For Download...