Usuwanie nadmiarowych cech

Preprocessing w uczeniu maszynowym w Pythonie

James Chapman

Curriculum Manager, DataCamp

Cechy nadmiarowe

  • Usuwanie cech szumowych
  • Usuwanie cech skorelowanych
  • Usuwanie zduplikowanych cech
Preprocessing w uczeniu maszynowym w Pythonie

Scenariusze ręcznego usuwania

city state lat long
hico tx 31.982778 -98.033333
mackinaw city mi 45.783889 -84.727778
winchester ky 37.990000 -84.179722
Preprocessing w uczeniu maszynowym w Pythonie

Cechy skorelowane

  • Statystyczna korelacja: cechy zmieniają się w tym samym kierunku
  • Modele liniowe zakładają niezależność cech
  • Współczynnik korelacji Pearsona
Preprocessing w uczeniu maszynowym w Pythonie

Cechy skorelowane

print(df)
        A     B     C
0    3.06  3.92  1.04
1    2.76  3.40  1.05
2    3.24  3.17  1.03
...
print(df.corr())
          A         B         C
A  1.000000  0.787194  0.543479
B  0.787194  1.000000  0.565468
C  0.543479  0.565468  1.000000
Preprocessing w uczeniu maszynowym w Pythonie

Czas na ćwiczenia!

Preprocessing w uczeniu maszynowym w Pythonie

Preparing Video For Download...