การมอนิเตอร์บริการ ML

MLOps Deployment and Life Cycling

Nemanja Radojkovic

Senior Machine Learning Engineer

การรักษาคุณภาพ

• ลูกค้าที่ชำระเงิน == ความคาดหวังด้านคุณภาพ
• การรับประกันคุณภาพเริ่มต้นที่การควบคุมคุณภาพ
• การมอนิเตอร์

ตัวชี้วัดประสิทธิภาพ

ตัวชี้วัดสุขภาพพื้นฐาน

• บริการทำงานอยู่หรือไม่?
• จำนวน request ในช่วงเวลาหนึ่ง?
• การกระจาย latency?

 

ตัวชี้วัดคุณภาพหลัก

• ประสิทธิภาพการพยากรณ์

โมเดล ML เสื่อมประสิทธิภาพได้อย่างไร?

มาฝึกกันเถอะ!

MLOps Deployment and Life Cycling