머신 러닝 모델 모니터링
MLOps 개념
Folkert Stijnman
ML Engineer
모니터링 & 재학습
모니터링
모니터링 유형
통계적 모니터링: 예측을 포함한 입력·출력 데이터에 집중
_예:_ 고객 X의 이탈 확률 72%, 고객 Y의 비이탈 확률 31%
모니터링 유형
컴퓨팅 모니터링: 기술 지표에 집중
_예:_ 서버 CPU 사용량, 유입 요청 수, 예측 수, 서버 다운타임
통계 vs 컴퓨팅 모니터링
피드백 루프
피드백 루프: 정답(ground truth)으로 머신 러닝 모델을 개선하는 과정
프로덕션 모니터링
