Итоги линейной регрессии

Обучение с учителем в R: регрессия

Nina Zumel and John Mount

Win-Vector, LLC

Преимущества и недостатки линейной регрессии

  • Преимущества
    • Проста в обучении и применении
    • Компактна
    • Менее склонна к переобучению
Обучение с учителем в R: регрессия

Преимущества и недостатки линейной регрессии

  • Преимущества
    • Проста в обучении и применении
    • Компактна
    • Менее склонна к переобучению
    • Интерпретируема
Call:
lm(formula = blood_pressure ~ age + weight, data = bloodpressure)

Coefficients:
(Intercept)          age       weight  
    30.9941       0.8614       0.3349
Обучение с учителем в R: регрессия

Преимущества и недостатки линейной регрессии

  • Преимущества
    • Проста в обучении и применении
    • Компактна
    • Менее склонна к переобучению
    • Интерпретируема
  • Недостатки
    • Описывает только линейные и аддитивные зависимости
Обучение с учителем в R: регрессия

Мультиколлинеарность

  • Мультиколлинеарность -- когда входные переменные частично коррелируют. 
Call:
lm(formula = blood_pressure ~ age + weight, data = bloodpressure)

Coefficients:
(Intercept)          age       weight  
    30.9941       0.8614       0.3349
Обучение с учителем в R: регрессия

Мультиколлинеарность

  • Мультиколлинеарность -- когда переменные частично коррелируют.
  • Коэффициенты могут менять знак
Call:
lm(formula = blood_pressure ~ age + weight, data = bloodpressure)

Coefficients:
(Intercept)          age       weight  
    30.9941       0.8614       0.3349
Обучение с учителем в R: регрессия

Мультиколлинеарность

  • Мультиколлинеарность -- когда переменные частично коррелируют.
  • Коэффициенты могут менять знак
  • Высокая мультиколлинеарность:
    • Коэффициенты (или стандартные ошибки) выглядят слишком большими
    • Модель может быть нестабильной
Call:
lm(formula = blood_pressure ~ age + weight, data = bloodpressure)

Coefficients:
(Intercept)          age       weight  
    30.9941       0.8614       0.3349
Обучение с учителем в R: регрессия

Что дальше

  • Оценка регрессионной модели
  • Правильное обучение модели
Обучение с учителем в R: регрессия

Давайте потренируемся!

Обучение с учителем в R: регрессия

Preparing Video For Download...