Škálování nad rámec PoC

Strategie umělé inteligence (AI)

Vidhi Chugh

AI strategist and ethicist

Co znamená škálovat?

 

Rostoucí objem dat

 

  • Škálovatelnost:
    • Správa rostoucího objemu dat, uživatelů a úloh
    • Zachování výkonu, kvality a cenové dostupnosti

 

  • Škálování AI = 3× vyšší výnosy!
    • Integrace do stávajících obchodních procesů
Strategie umělé inteligence (AI)

Platformy cloud computingu

 

  • Od PoC k plnohodnotnému nasazení

 

  • Platforma cloud computingu
    • Soulad s předpisy o datech
    • Bezpečnost
    • Podpora multi-cloud a hybridních architektur

 

Výběr správné platformy cloud computingu

Strategie umělé inteligence (AI)

Aspekty nasazení

  • Analýza nákladů a výkonu
  • Opatření pro správu; snadné nasazení a správa

Analýza nákladů a výkonu

Strategie umělé inteligence (AI)

Vytvořit nebo koupit

 

  • Hotový model vs. vlastní algoritmus

  • Větší kontrola nad výkonem systému

Větší kontrola nad výkonem systému

 

  • Časové harmonogramy projektů

  • Vlastní algoritmus je časově náročnější než dostupný algoritmus

Časové harmonogramy projektů

Strategie umělé inteligence (AI)

Škálovatelnost a výkon

 

  • Škálování = kvalitní predikce bez snížení výkonu

 

  • Výkon:
    • Přesnost
    • Latence: doba, za kterou model vytvoří predikci
    • Propustnost: počet predikcí za daný čas

 

 

Škálování – kvalitní predikce bez snížení výkonu

Strategie umělé inteligence (AI)

Data ve velkém měřítku

  • Základ modelů strojového učení

  • Správa životního cyklu dat

    • Příprava a údržba

Základ modelů strojového učení

Strategie umělé inteligence (AI)

Přístup k datům

 

  • Přístupná jen pro určitá oddělení; izolovaná od ostatních
    • Vznik sil
    • Snížení transparentnosti
    • Neefektivní modely

 

  • Různé zdroje = různé formáty
    • Standardizace

 

Vznik sil

Strategie umělé inteligence (AI)

Architektura připravená na škálování

 

Návrh správné architektury

 

  • Návrh správné architektury

 

  • Mikroslužby
    • Nezávislé škálování
    • Flexibilita
    • Responzivita

 

  • Koordinace interakcí je náročná
Strategie umělé inteligence (AI)

Infrastruktura pro škálování

GPU urychlují úlohy, ale za vyšší náklady

 

  • Rozsáhlé datové výpočty
  • GPU urychlují úlohy, ale za vyšší náklady

 

  • Zvažte přínosy
    • Urychlení trénování modelu
    • Zlepšení výkonu
    • Za dodatečné náklady
Strategie umělé inteligence (AI)

Zefektivnění procesů AI

  • Podrobný implementační plán a návrh architektury
  • Standardizace a zefektivnění
    • Tvorba, nasazení a monitorování modelů

Standardizace a zefektivnění

Strategie umělé inteligence (AI)

Pojďme si procvičit!

Strategie umělé inteligence (AI)

Preparing Video For Download...