データを探索する

Pythonで学ぶモンテカルロ・シミュレーション

Izzy Weber

Curriculum Manager, DataCamp

糖尿病データセット

独立変数(10個):

  • 年齢 age
  • 性別 sex
  • 体格指数 bmi
  • 平均血圧 bp
  • 血清測定値6種:tc, ldl, hdl, tch, ltg, glu
1 Bradley Efron, Trevor Hastie, Iain Johnstone and Robert Tibshirani (2004) "Least Angle Regression," Annals of Statistics (with discussion), 407-499 2 https://www4.stat.ncsu.edu/~boos/var.select/diabetes.html
Pythonで学ぶモンテカルロ・シミュレーション

糖尿病データセット

従属変数

  • ベースライン1年後の疾患進行の量的指標 y

 

データセットの規模

  • 糖尿病患者 442 名
Pythonで学ぶモンテカルロ・シミュレーション

糖尿病データセット

dia.head()
|     | age | sex | bmi  | bp     | tc  | ldl   | hdl  | tch  | ltg    | glu | y   |
|-----|-----|-----|------|--------|-----|-------|------|------|--------|-----|-----|
| 0   | 59  | 2   | 32.1 | 101.00 | 157 | 93.2  | 38.0 | 4.00 | 4.8598 | 87  | 151 |
| 1   | 48  | 1   | 21.6 | 87.00  | 183 | 103.2 | 70.0 | 3.00 | 3.8918 | 69  | 75  |
| 2   | 72  | 2   | 30.5 | 93.00  | 156 | 93.6  | 41.0 | 4.00 | 4.6728 | 85  | 141 |
| 3   | 24  | 1   | 25.3 | 84.00  | 198 | 131.4 | 40.0 | 5.00 | 4.8903 | 89  | 206 |
| 4   | 50  | 1   | 23.0 | 101.00 | 192 | 125.4 | 52.0 | 4.00 | 4.2905 | 80  | 135 |
1 https://www4.stat.ncsu.edu/~boos/var.select/diabetes.html 2 http://statweb.lsu.edu/faculty/li/IIT/diabetes.txt
Pythonで学ぶモンテカルロ・シミュレーション

シミュレーション前にデータを探索する理由

  • 変数の分布を目視確認
    • 確率分布の直感を得る
  • 予測変数間の相関を確認・測定
    • 共分散構造をモデリングする根拠
  • 予測変数と応答の相関を確認・測定
    • 予測変数と応答の関係の初期理解
Pythonで学ぶモンテカルロ・シミュレーション

データセットのペアプロット

sns.pairplot(dia)

dia データセットの変数のペアプロット

Pythonで学ぶモンテカルロ・シミュレーション

データセットのペアプロット

sns.pairplot(dia)

性別を強調したペアプロット

Pythonで学ぶモンテカルロ・シミュレーション

データセットのペアプロット

sns.pairplot(dia)

tc と ldl を強調したペアプロット

Pythonで学ぶモンテカルロ・シミュレーション

変数間の相関

dia.corr()

dia の全変数間の相関を示す相関行列

Pythonで学ぶモンテカルロ・シミュレーション

練習してみましょう!

Pythonで学ぶモンテカルロ・シミュレーション

Preparing Video For Download...