Знайомство з DataFrame

Опрацювання даних у pandas

Richie Cotton

Data Evangelist at DataCamp

Для чого pandas?

Опис курсу

Розділ 1: DataFrame
- Сортування й підмножини
- Створення нових стовпців
Розділ 2: Агрегування даних
- Описова статистика
- Підрахунок
- Групова описова статистика

Розділ 3: Слайсинг та індексація даних
- Вибірка за допомогою слайсингу
- Індекси та вибірка за індексами
Розділ 4: Створення й візуалізація даних
- Побудова графіків
- Обробка пропусків
- Зчитування даних у DataFrame

pandas побудовано на NumPy та Matplotlib

Трикутник на двох прямокутниках. Трикутник — це пакет pandas, прямокутники — пакети NumPy та matplotlib.

pandas популярний

Емодзі панди, повторене сотні разів, що уособлює численних користувачів pandas.

¹ https://pypistats.org/packages/pandas

Прямокутні дані

Ім'я	Порода	Колір	Зріст (см)	Вага (кг)	Дата народження
Bella	Лабрадор	Коричн.	56	25	2013-07-01
Charlie	Пудель	Чорний	43	23	2016-09-16
Lucy	Чау-чау	Коричн.	46	22	2014-08-25
Cooper	Шнауцер	Сірий	49	17	2011-12-11
Max	Лабрадор	Чорний	59	29	2017-01-20
Stella	Чихуахуа	Рудий	18	2	2015-04-20
Bernie	Сенбернар	Білий	77	74	2018-02-27

DataFrame у pandas

print(dogs)

      name        breed  color  height_cm  weight_kg date_of_birth
0    Bella     Labrador  Brown         56         24    2013-07-01
1  Charlie       Poodle  Black         43         24    2016-09-16
2     Lucy    Chow Chow  Brown         46         24    2014-08-25
3   Cooper    Schnauzer   Gray         49         17    2011-12-11
4      Max     Labrador  Black         59         29    2017-01-20
5   Stella    Chihuahua    Tan         18          2    2015-04-20
6   Bernie  St. Bernard  White         77         74    2018-02-27

Огляд DataFrame: .head()

print(dogs.head())

      name        breed  color  height_cm  weight_kg date_of_birth
0    Bella     Labrador  Brown         56         24    2013-07-01
1  Charlie       Poodle  Black         43         24    2016-09-16
2     Lucy    Chow Chow  Brown         46         24    2014-08-25
3   Cooper    Schnauzer   Gray         49         17    2011-12-11
4      Max     Labrador  Black         59         29    2017-01-20

Огляд DataFrame: .info()

print(dogs.info())

<class 'pandas.core.frame.DataFrame'>
RangeIndex: 7 entries, 0 to 6
Data columns (total 6 columns):
 #   Column         Non-Null Count  Dtype 
 --  ------         --------------  ----- 
 0   name           7 non-null      object
 1   breed          7 non-null      object
 2   color          7 non-null      object
 3   height_cm      7 non-null      int64 
 4   weight_kg      7 non-null      int64 
 5   date_of_birth  7 non-null      object
dtypes: int64(2), object(4)
memory usage: 464.0+ bytes

Огляд DataFrame: .shape

print(dogs.shape)

(7, 6)

Огляд DataFrame: .describe()

print(dogs.describe())

       height_cm  weight_kg
count   7.000000   7.000000
mean   49.714286  27.428571
std    17.960274  22.292429
min    18.000000   2.000000
25%    44.500000  19.500000
50%    49.000000  23.000000
75%    57.500000  27.000000
max    77.000000  74.000000

Компоненти DataFrame: .to_numpy()

print(dogs.to_numpy())

array([['Bella', 'Labrador', 'Brown', 56, 24, '2013-07-01'],
       ['Charlie', 'Poodle', 'Black', 43, 24, '2016-09-16'],
       ['Lucy', 'Chow Chow', 'Brown', 46, 24, '2014-08-25'],
       ['Cooper', 'Schnauzer', 'Gray', 49, 17, '2011-12-11'],
       ['Max', 'Labrador', 'Black', 59, 29, '2017-01-20'],
       ['Stella', 'Chihuahua', 'Tan', 18, 2, '2015-04-20'],
       ['Bernie', 'St. Bernard', 'White', 77, 74, '2018-02-27']],
      dtype=object)

Компоненти DataFrame: .columns і .index

print(dogs.columns)

Index(['name', 'breed', 'color', 'height_cm', 'weight_kg', 'date_of_birth'],
dtype='object')

dogs.index

RangeIndex(start=0, stop=7, step=1)

Філософія pandas

Має бути один — і бажано лише один — очевидний спосіб це зробити.

- «Дзен Python» Тіма Пітерса, пункт 13

Зелений швейцарський армійський ніж

¹ https://www.python.org/dev/peps/pep-0020/

Давайте потренуємось!

Опрацювання даних у pandas