cross_val_score() w sklearn

Walidacja modeli w Pythonie

Kasey Jones

Data Scientist

cross_val_score()

from sklearn.model_selection import cross_val_score
from sklearn.ensemble import RandomForestClassifier
rfc = RandomForestClassifier()

estimator: model do użycia

X: zbiór predyktorów

y: tablica odpowiedzi

cv: liczba podziałów kroswalidacji

cross_val_score(estimator=rfc, X=X, y=y, cv=5)
Walidacja modeli w Pythonie

Użycie scoring i make_scorer

Parametr scoring funkcji cross_val_score:

# Load the Methods
from sklearn.metrics import mean_absolute_error, make_scorer
# Create a scorer
mae_scorer = make_scorer(mean_absolute_error)
# Use the scorer
cross_val_score(<estimator>, <X>, <y>, cv=5, scoring=mae_scorer)
Walidacja modeli w Pythonie

Wczytanie metod sklearn

from sklearn.ensemble import RandomForestRegressor
from sklearn.model_selection import cross_val_score
from sklearn.metrics import mean_squared_error, make_scorer

Utworzenie modelu i miary oceny

rfc = RandomForestRegressor(n_estimators=20, max_depth=5, random_state=1111)
mse = make_scorer(mean_squared_error)

Uruchomienie cross_val_score()

cv_results = cross_val_score(rfc, X, y, cv=5, scoring=mse)
Walidacja modeli w Pythonie

Analiza wyników

print(cv_results)
[196.765, 108.563, 85.963, 222.594, 140.942]

Wyświetlenie średniej i odchylenia standardowego:

print('The mean: {}'.format(cv_results.mean()))
print('The std: {}'.format(cv_results.std()))
The mean: 150.965
The std: 51.676
Walidacja modeli w Pythonie

Czas na ćwiczenia!

Walidacja modeli w Pythonie

Preparing Video For Download...