Warum du dein Modell überwachen musst

Überwachung von Machine-Learning-Konzepten

Hakim Elakhrass

Co-founder and CEO of NannyML

Machine Learning in Produktion

Typischer Entwicklungsprozess

Der Pfeilfluss hat vier Elemente: Projekt definieren, Daten vorbereiten, Modell trainieren und bereitstellen.

Nach der Bereitstellung

Aktualisierter Flow der Data-Science-Entwicklung mit neuem Pfeil für Monitoring nach der Bereitstellung. Zusätzliche Pfeile verbinden Monitoring mit Datenvorbereitung, Modelltraining und Bereitstellung für iterative Verbesserungen basierend auf Monitoring-Erkenntnissen.

Überwachung von Machine-Learning-Konzepten

Ausfallrisiko senken

Der Zillow-Fall

Ein „Zu verkaufen“-Schild vor einem Haus.

Gründe für Modellfehler:

  • Softwareprobleme
  • Drifts in den Eingangsdaten
  • Änderungen in der Beziehung zwischen Features und Zielgrößen
Überwachung von Machine-Learning-Konzepten

Business-Impact maximieren

 

  • Modell an Business-Ziele anpassen

 

  • Cloud-Kosten senken

 

Die Abbildung zeigt eine Pyramide aus sechs Holzklötzen. Die Basis bildet ein KPI aus den Buchstaben auf jedem Block. Die übrigen Ebenen stehen für Wachstum, Zielerreichung und Effizienz.

Die Abbildung zeigt ein Cloud-Logo aus neun Holzklötzen.

Überwachung von Machine-Learning-Konzepten

KI-Sicherheit verbessern

Drei Sicherheitsprobleme:

  • Bias – faire Ausgaben für verschiedene Nutzergruppen

 

  • Adversarial Attacks – bösartige Manipulation von Eingabedaten erkennen

 

  • Fehlende Erklärbarkeit – verstehen, wie das Modell entscheidet

 

Das Bild zeigt einen Holzklotz mit Skala, der nach vorn bewegt wird und mehr Gerechtigkeit im System symbolisiert, was Bias reduziert.

Das Bild zeigt einen Holzklotz mit einem Vorhängeschloss, der nach vorn bewegt wird und mehr Sicherheit symbolisiert.

Das Bild zeigt einen nach vorn bewegten Holzklotz; Linien vom Kopf symbolisieren mehr Verständnis des intelligenten Systems.

Überwachung von Machine-Learning-Konzepten

Mit Daten die Welt verändern

Der Automatisierungsprozess

Das Bild zeigt eine automatisierte Produktionslinie.

Überwachung von Machine-Learning-Konzepten

Lass uns üben!

Überwachung von Machine-Learning-Konzepten

Preparing Video For Download...