Формулирование гипотез

Разведочный анализ данных на Python

George Boorman

Curriculum Manager, DataCamp

Что нам известно?

Столбчатая диаграмма с количеством рейсов по авиакомпаниям в разных ценовых категориях; у Jet Airways наибольшее число билетов первого класса

Разведочный анализ данных на Python

Что нам известно?

sns.heatmap(planes.corr(numeric_only=True), annot=True)
plt.show()

Тепловая карта с коэффициентами корреляции Пирсона между переменными набора данных planes

Разведочный анализ данных на Python

Ложная корреляция

sns.scatterplot(data=planes, x="Duration", y="Price", hue="Total_Stops")
plt.show()

Диаграмма рассеяния цены и продолжительности полёта с учётом числа пересадок

Разведочный анализ данных на Python

Как мы это знаем?

Тепловая карта с коэффициентами корреляции для каждого числа пересадок

Разведочный анализ данных на Python

Что является истиной?

Пишущая машинка с надписью "Fake News"

  • Дадут ли данные за другой период те же результаты?

  • Для выявления связей, различий и закономерностей:

    • Применяется проверка гипотез
  • Проверка гипотез требует до сбора данных:

    • Формулирования гипотезы или вопроса
    • Выбора подходящего статистического критерия
1 Image credit: https://unsplash.com/@markuswinkler
Разведочный анализ данных на Python

Подглядывание в данные

 

Офис с видом на взлётно-посадочную полосу аэропорта

Лупа над столбчатой диаграммой

Разведочный анализ данных на Python

Формулирование гипотез

sns.barplot(data=planes, x="Airline", y="Duration")
plt.show()

Столбчатая диаграмма продолжительности полёта по авиакомпаниям

Разведочный анализ данных на Python

Формулирование гипотез

sns.barplot(data=planes, x="Destination", y="Price")
plt.show()

Столбчатая диаграмма средней цены по направлениям

Разведочный анализ данных на Python

Следующие шаги

  • Спланируем эксперимент

  • Это включает такие шаги, как:

    • Выбор выборки
    • Определение необходимого числа наблюдений
    • Выбор статистического критерия
Разведочный анализ данных на Python

Давайте потренируемся!

Разведочный анализ данных на Python

Preparing Video For Download...