欠損値と外れ値

Pythonで統計面接問題を練習しよう

Conor Dewey

Data Scientist, Squarespace

欠損値の扱い方

  • 行ごと削除
  • 欠損値の代入
Pythonで統計面接問題を練習しよう

行ごと削除

df.dropna(inplace=True)

 

Pythonで統計面接問題を練習しよう

欠損値の代入

  • 定数で埋める
  • ランダムなレコード
  • 平均・中央値・最頻値
  • 別モデルで推定
Pythonで統計面接問題を練習しよう

便利な関数

  • isnull()
  • dropna()
  • fillna()
Pythonで統計面接問題を練習しよう

外れ値への対処

  • 標準偏差
  • 四分位範囲(IQR)
Pythonで統計面接問題を練習しよう

標準偏差

 

ガウス曲線

1 Wikimedia
Pythonで統計面接問題を練習しよう

四分位範囲(IQR)

  四分位範囲の図

1 Wikimedia
Pythonで統計面接問題を練習しよう

まとめ

  • 行ごと削除
  • 欠損値の代入
  • 標準偏差
  • 四分位範囲
Pythonで統計面接問題を練習しよう

面接に向けて準備しましょう!

Pythonで統計面接問題を練習しよう

Preparing Video For Download...