Deneysel verilerde karmaşıklıkların ele alınması

Python ile Deney Tasarımı

James Chapman

Curriculum Manager, DataCamp

Jeolojik veriler

mineral_rocks

 SampleID     RockType  Location  MineralHardness  RockPorosity
        1  Metamorphic      West              5.9          12.3
        2      Igneous     North              5.3           1.6
        3  Metamorphic      East              5.6          11.0
        4  Metamorphic     South              3.2          12.2
        5  Sedimentary     South              2.0          29.8

Veri karmaşıklıklarını anlama

Kaya türleri ve mineral sertliği etkileşebilir; mineral özelliklerini etkiler
Kaya gözenekliliği varyansı değişebilir; heteroskedastisiteye işaret eder
Karıştırıcı değişkenler mineral sertliği ve gözenekliliği etkileyebilir

Bir yığın halinde farklı kayalar.

Etkileşimlerin ele alınması

sns.scatterplot(x='MineralHardness', y='RockPorosity', 
                hue='RockType', data=mineral_rocks)

Kaya Türüne göre Mineral Sertliği vs. Kaya Gözenekliliği

Heteroskedastisitenin ele alınması

Heteroskedastisite: bir değişkenin değişkenliğinin, diğerinin aralığı boyunca değişmesi

sns.residplot(x='MineralHardness', y='RockPorosity', 
              data=mineral_rocks, lowess=True)

Eşit olmayan varyansı inceleme

Normal olmayan veriler

sns.displot(mineral_rocks['RockPorosity'])

RockPorosity histogramı ve yoğunluk eğrisi

Box-Cox ile veri dönüştürme

from scipy.stats import boxcox
mineral_rocks['TransformedRockPorosity'], _ = boxcox(mineral_rocks['RockPorosity'])
sns.displot(mineral_rocks['TransformedRockPorosity'])

Box-Cox ile dönüştürülmüş Gözeneklilik

sns.residplot(x='MineralHardness', y='TransformedRockPorosity',
              data=mineral_rocks, lowess=True)

Dönüştürülmüş Kaya Gözenekliliğinin Mineral Sertliğine karşı artık grafiği

Ayo berlatih!

Python ile Deney Tasarımı