정답 데이터 가용성

Monitoring Machine Learning 개념

Hakim Elakhrass

Co-founder and CEO of NannyML

즉시 제공되는 정답 데이터

택시 도착 예측과 관련된 노란 택시 이미지입니다.

  • 실제 성능을 측정

  • 평가가 쉬움

  • 정확함

Monitoring Machine Learning 개념

프로덕션 데이터 - 즉시

분류 문제의 성능 그래프이며, "기준 기간"은 테스트 데이터셋, "분석 기간"은 프로덕션 데이터 스트림을 의미합니다. 또한 정답 값이 강조된 표 형식 데이터가 있습니다.

Monitoring Machine Learning 개념

지연된 정답 데이터

대출 연체 예측과 관련된 빈 지갑 이미지입니다.

  • 지연은 애플리케이션에 따라 다름
  • 예: 대출 연체 예측
  • 그동안 성능은 미확인
  • 성능 추정 필요
Monitoring Machine Learning 개념

프로덕션 데이터 - 지연

분류 문제의 성능 그래프이며, "기준 기간"은 테스트 데이터셋, "분석 기간"은 프로덕션 데이터 스트림을 의미합니다. 또한 정답 값이 강조된 표 형식 데이터가 있습니다.

Monitoring Machine Learning 개념

정답 데이터 부재

보험 가격 책정 사례와 관련된 보험 증권 이미지입니다.

  • 완전 자동화 프로세스에서 존재
  • 예: 보험 가격 책정
  • 실제 성능은 미확인
  • 성능 추정 필요
Monitoring Machine Learning 개념

프로덕션 데이터 - 부재

분류 문제의 성능 그래프이며, "기준 기간"은 테스트 데이터셋, "분석 기간"은 프로덕션 데이터 스트림을 의미합니다. 또한 정답 값이 강조된 표 형식 데이터가 있습니다.

Monitoring Machine Learning 개념

Laten we oefenen!

Monitoring Machine Learning 개념

Preparing Video For Download...