Meer over resamples

Machine Learning met caret in R

Zach Mayer

Data Scientist at DataRobot and co-author of caret

Modellen vergelijken

Resamples heeft veel handige methods
Een van mijn favoriete functies (dank aan Max!)
Inspireerde het pakket caretEnsemble

Boxplot

bwplot(resamps, metric = "ROC")

De afbeelding toont een boxplot van de resamples. De ROC-verdeling is veel hoger voor random forest dan voor glmnet.

Dotplot

dotplot(resamps, metric = "ROC")

De afbeelding toont een dotplot van de resamples. Dit geeft vergelijkbare info als de boxplot, maar je ziet alleen het gemiddelde en het betrouwbaarheidsinterval van ROC per modeltype.

Dichtheidsplot

densityplot(resamps, metric = "ROC")

De afbeelding toont dichtheidskrommen van de ROC voor de resamples van elk model.

Spreidingsplot

xyplot(resamps, metric = "ROC")

De afbeelding toont een scatterplot van de AUC-scores voor glmnet versus random forest. Elk punt is één resample.

Nog een dotplot

dotplot(lots_of_models, metric = "ROC")

De afbeelding toont een dotplot van modeltype versus ROC. De plot laat zien dat dotplots goed schalen voor veel modeltypen.

Laten we oefenen!

Machine Learning met caret in R