공개 vs 비공개 리더보드

Python으로 Kaggle 대회 공략하기

Yauhen Babakhin

Kaggle Grandmaster

대회 지표

평가 지표	문제 유형
ROC AUC	분류
F1 점수 (F1)	분류
평균 로그 손실 (LogLoss)	분류
평균 절대 오차 (MAE)	회귀
평균 제곱 오차 (MSE)	회귀
MAP@K (Mean Average Precision at K)	랭킹

테스트를 공개/비공개로 분할

# Write a submission file to the disk
submission[['id', 'target']].to_csv('submission_1.csv', index=False)

제출 파일	공개 LB MSE	비공개 LB MSE
submission_1.csv	2.895	?

과적합 예시

과적합 예시

공개/비공개 리더보드에서의 과적합 예시

작은 순위 변동 예시

큰 순위 변동 예시

Python으로 Kaggle 대회 공략하기