Leaderboard público vs. privado

Vencendo uma competição do Kaggle em Python

Yauhen Babakhin

Kaggle Grandmaster

Métrica da competição

Métrica de avaliação Tipo de problema
Area Under the ROC (AUC) Classificação
F1 Score (F1) Classificação
Mean Log Loss (LogLoss) Classificação
Mean Absolute Error (MAE) Regressão
Mean Squared Error (MSE) Regressão
Mean Average Precision at K (MAPK, MAP@K) Ranqueamento
Vencendo uma competição do Kaggle em Python

Divisão do teste

 

divisão do teste em partes pública e privada

Vencendo uma competição do Kaggle em Python

Leaderboards

# Write a submission file to the disk
submission[['id', 'target']].to_csv('submission_1.csv', index=False)

 

Envio MSE no LB público MSE no LB privado
submission_1.csv 2.895 ?
Vencendo uma competição do Kaggle em Python

Overfitting

exemplo de overfitting

Vencendo uma competição do Kaggle em Python

Overfitting

exemplo de overfitting

Vencendo uma competição do Kaggle em Python

Overfitting

exemplo de overfitting com leaderboards público e privado

Vencendo uma competição do Kaggle em Python

Mudança entre leaderboards público e privado

exemplo de pequena mudança

exemplo de grande mudança

Vencendo uma competição do Kaggle em Python

Vamos praticar!

Vencendo uma competição do Kaggle em Python

Preparing Video For Download...