다른 데이터 문제 다루기

Python으로 배우는 Machine Learning 특성 공학

Robert O'Callaghan

Director of Data Science, Ordergroove

문자 이상치

print(df['RawSalary'].dtype)
dtype('O')
Python으로 배우는 Machine Learning 특성 공학

문자 이상치

print(df['RawSalary'].head())
0          NaN
1    70,841.00
2          NaN
3    21,426.00
4    41,671.00
Name: RawSalary, dtype: object
Python으로 배우는 Machine Learning 특성 공학

문자 이상치 처리

df['RawSalary'] = df['RawSalary'].str.replace(',', '')
df['RawSalary'] = df['RawSalary'].astype('float')
Python으로 배우는 Machine Learning 특성 공학

다른 잡음 문자 찾기

coerced_vals = pd.to_numeric(df['RawSalary'], 
                             errors='coerce')
Python으로 배우는 Machine Learning 특성 공학

다른 잡음 문자 찾기

print(df[coerced_vals.isna()].head())
0           NaN
2           NaN
4     $51408.00
Name: RawSalary, dtype: object
Python으로 배우는 Machine Learning 특성 공학

메서드 체이닝

df['column_name'] = df['column_name'].method1()
df['column_name'] = df['column_name'].method2()
df['column_name'] = df['column_name'].method3()

다음과 동일:

df['column_name'] = df['column_name']\
                     .method1().method2().method3()
Python으로 배우는 Machine Learning 특성 공학

문자 이상치 바로잡기

Python으로 배우는 Machine Learning 특성 공학

Preparing Video For Download...