Více o resamplování

Machine Learning s balíčkem caret v R

Zach Mayer

Data Scientist at DataRobot and co-author of caret

Porovnávání modelů

  • Resamples nabízí mnoho užitečných metod
  • Jedna z oblíbených funkcí (díky Maxovi!)
  • Inspirovala balíček caretEnsemble
Machine Learning s balíčkem caret v R

Krabicový graf

bwplot(resamps, metric = "ROC")

Obrázek ukazuje krabicový graf resampů. Distribuce ROC je výrazně vyšší u modelu random forest než u modelu glmnet.

Machine Learning s balíčkem caret v R

Bodový graf

dotplot(resamps, metric = "ROC")

Obrázek ukazuje bodový graf resampů. Poskytuje podobné informace jako krabicový graf, ale zobrazuje pouze průměr a interval spolehlivosti ROC pro každý typ modelu.

Machine Learning s balíčkem caret v R

Graf hustoty

densityplot(resamps, metric = "ROC")

Obrázek ukazuje křivky hustoty pravděpodobnosti ROC pro resampování každého modelu.

Machine Learning s balíčkem caret v R

Bodový diagram

xyplot(resamps, metric = "ROC")

Obrázek ukazuje bodový graf skóre AUC pro glmnet oproti random forest. Každý bod odpovídá jednomu resamplu.

Machine Learning s balíčkem caret v R

Další bodový graf

dotplot(lots_of_models, metric = "ROC")

Obrázek ukazuje bodový graf typu modelu oproti ROC. Graf demonstruje, že bodové grafy se dobře škálují při zobrazení mnoha typů modelů.

Machine Learning s balíčkem caret v R

Pojďme si procvičit!

Machine Learning s balíčkem caret v R

Preparing Video For Download...