Пошук закономірностей у пропущених даних

Робота з пропущеними даними в Python

Suraj Donthi

Deep Learning & Computer Vision Consultant

Пошук кореляцій між пропусками

  • Теплова карта або карта кореляцій пропусків
  • Дендрограма пропусків
Робота з пропущеними даними в Python

Теплова карта пропусків

  • Графік кореляцій пропусків між стовпцями
  • Пояснює залежності пропусків між стовпцями

Теплова карта пропусків для набору даних про діабет

Робота з пропущеними даними в Python
import missingno as msno
diabetes = pd.read_csv('pima-indians-diabetes data.csv')

msno.heatmap(diabetes)

Теплова карта пропусків для набору даних про діабет

Робота з пропущеними даними в Python

Дендрограма пропусків

  • Деревоподібна діаграма пропусків
  • Описує кореляції змінних, групуючи їх
msno.dendrogram(diabetes)

Дендрограма пропусків для набору даних про діабет

Робота з пропущеними даними в Python

Дендрограма пропусків для набору даних про діабет

Робота з пропущеними даними в Python

Дендрограма пропусків для набору даних про діабет

Робота з пропущеними даними в Python

Дендрограма пропусків для набору даних про діабет

Робота з пропущеними даними в Python

Дендрограма пропусків для набору даних про діабет

Робота з пропущеними даними в Python

Підсумок

  • Проаналізуйте теплову карту пропусків
      msno.heatmap(df)
    
  • Проаналізуйте дендрограму пропусків
      msno.dendrogram(df)
    
Робота з пропущеними даними в Python

Давайте потренуємось!

Робота з пропущеними даними в Python

Preparing Video For Download...