Публичный и приватный лидерборд

Победа в соревновании Kaggle на Python

Yauhen Babakhin

Kaggle Grandmaster

Метрика соревнования

Метрика оценки Тип задачи
Area Under the ROC (AUC) Классификация
F1 Score (F1) Классификация
Mean Log Loss (LogLoss) Классификация
Mean Absolute Error (MAE) Регрессия
Mean Squared Error (MSE) Регрессия
Mean Average Precision at K (MAPK, MAP@K) Ранжирование
Победа в соревновании Kaggle на Python

Разбиение тестовой выборки

 

тестовая выборка разделена на публичную и приватную части

Победа в соревновании Kaggle на Python

Лидерборды

# Write a submission file to the disk
submission[['id', 'target']].to_csv('submission_1.csv', index=False)

 

Сабмит Публичный LB MSE Приватный LB MSE
submission_1.csv 2.895 ?
Победа в соревновании Kaggle на Python

Переобучение

пример переобучения

Победа в соревновании Kaggle на Python

Переобучение

пример переобучения

Победа в соревновании Kaggle на Python

Переобучение

пример переобучения с публичным и приватным лидербордами

Победа в соревновании Kaggle на Python

Встряска публичного и приватного лидерборда

пример небольшого shake-up

пример значительного shake-up

Победа в соревновании Kaggle на Python

Давайте потренируемся!

Победа в соревновании Kaggle на Python

Preparing Video For Download...