Modellutvärdering

Öva på statistiska intervjufrågor i R

Zuzanna Chmielewska

Actuary

Korsvalidering

Korsvalidering

Korsvalidering

Korsvalidering

Korsvalidering

Korsvalidering

Korsvalidering

Förväxlingsmatris

Förväxlingsmatris

Förväxlingsmatris

Förväxlingsmatris

Klassificeringsmått

$\text{accuracy} = \frac{TP+TN}{TP+TN+FP+FN}$

$\text{precision} = \frac{TP}{TP+FP}$

$\text{recall} = \frac{TP}{TP+FN}$

Klassificeringsmått

Precision

Recall

Regressionsmått

Regressionsmått

Regressionsmått

Medelkvadratsfelens rot

$RMSE = \sqrt{\frac{1}{n}\sum_{i=1}^{n} (y_i - \hat{y}_i)^2}$

Medelabsolutfel

$MAE = \frac{1}{n} \sum_{i=1}^{n} |y_i - \hat{y}_i|$

Regressionsmått

Medelkvadratsfelens rot

$RMSE = \sqrt{\frac{1}{n}\sum_{i=1}^{n} (y_i - \hat{y}_i)^2}$

• ger stor vikt åt stora fel

Medelabsolutfel

$MAE = \frac{1}{n} \sum_{i=1}^{n} |y_i - \hat{y}_i|$

• enkel att tolka

Sammanfattning

• metoden med valideringsuppsättning
• korsvalidering
• förväxlingsmatris
• klassificeringsmått
• regressionsmått

Nu kör vi en övning!

Öva på statistiska intervjufrågor i R