Bộ dữ liệu Stanford Open Policing Project

Phân tích hoạt động của cảnh sát với pandas

Kevin Markham

Founder, Data School

Giới thiệu bộ dữ liệu

Các lần cảnh sát dừng xe

Bản đồ Stanford Open Policing Project

Tải dữ liệu cho bất kỳ bang nào: https://openpolicing.stanford.edu/

Chuẩn bị dữ liệu

Khám phá dữ liệu
Làm sạch dữ liệu

import pandas as pd
ri = pd.read_csv('police.csv')
ri.head(3)

  state   stop_date stop_time  county_name driver_gender driver_race
0    RI  2005-01-04     12:55          NaN             M       White
1    RI  2005-01-23     23:15          NaN             M       White
2    RI  2005-02-17     04:15          NaN             M       White

Mỗi hàng tương ứng một lần dừng xe
NaN là giá trị thiếu

Xác định giá trị thiếu (1)

ri.isnull()

   state stop_date stop_time county_name driver_gender
0  False     False     False        True         False       
1  False     False     False        True         False       
2  False     False     False        True         False       
...

Xác định giá trị thiếu (2)

ri.isnull().sum()

state                     0
stop_date                 0
stop_time                 0
county_name           91741
driver_gender          5205
...

.sum() tính tổng theo từng cột
True = 1, False = 0

Xóa một cột

ri.isnull().sum()

state                     0
stop_date                 0
stop_time                 0
county_name           91741
driver_gender          5205
driver_race            5202
...

ri.shape

(91741, 15)

Cột county_name chỉ có giá trị thiếu
Xóa county_name bằng .drop()

ri.drop('county_name', 
  axis='columns', inplace=True)

Xóa hàng

.dropna(): Xóa hàng dựa trên việc có giá trị thiếu

ri.head()

  state   stop_date stop_time driver_gender driver_race
0    RI  2005-01-04     12:55             M       White
1    RI  2005-01-23     23:15             M       White
2    RI  2005-02-17     04:15             M       White
3    RI  2005-02-20     17:15             M       White
4    RI  2005-02-24     01:20             F       White

ri.dropna(subset=['stop_date', 'stop_time'], inplace=True)

Cùng luyện tập nào!

Phân tích hoạt động của cảnh sát với pandas