Phase d’idéation

Concepts de LLMOps

Max Knobbout, PhD

Applied Scientist, Uber

Cycle de vie LLM : Phase d’idéation

Aperçu des phases du cycle de vie d'une application LLM

Concepts de LLMOps

Collecte de données

Image humoristique d’un personnage de dessin animé tenant différentes sources de données

  • Identification des besoins
  • Recherche de sources
  • Garantie d’accessibilité
Concepts de LLMOps

Collecte de données

Image humoristique d’un personnage de dessin animé tenant différentes sources de données

  1. Les données sont-elles pertinentes ?
  2. Les données sont-elles disponibles ?
    • Transformer les données
    • Configurer des bases de données supplémentaires
    • Évaluer les coûts
    • Considérer d'autres limitations d'accès
  3. Les données respectent-elles les normes ?
    • Concerne la qualité et la gouvernance
Concepts de LLMOps

Sélection du modèle de base

  • Modèles pré-entraînés :

Image d’un modèle pré-entraîné

  • Propriétaire ou source ouverte ?
Concepts de LLMOps

Modèles propriétaires (détenus en privé)

Avantages :

  • Facilité d'installation et d'utilisation
  • Assurance qualité
  • Fiabilité, rapidité et disponibilité

Limites :

  • Nécessite l’exposition des données
  • Personnalisation

Exemples :

Logo des modèles LLM propriétaires

Concepts de LLMOps

Source ouverte (accessible au public)

Avantages :

  • Hébergement interne
  • Transparence
  • Personnalisation totale

Limites :

  • Support
  • Usage commercial

Exemple : Logo de Meta Llama 3

Téléchargeable depuis : Logo de Hugging Face

Concepts de LLMOps

Facteurs de sélection du modèle

1. Performance ⭐

  • Qualité de la réponse
  • Vitesse

Icônes liées aux performances

2. Caractéristiques du modèle ⭐

  • Données utilisées pour entraîner le modèle
  • Taille de la fenêtre de contexte
  • Capacité d’affinage

Icônes liées aux caractéristiques du modèle

Concepts de LLMOps

Facteurs de sélection du modèle

3. Considérations pratiques ⭐

  • Licence
  • Coût
  • Impact environnemental

Icônes liées aux considérations pratiques

4. Facteurs secondaires

  • Nombre de paramètres
  • Popularité

Icônes liées aux facteurs secondaires

Concepts de LLMOps

Passons à la pratique !

Concepts de LLMOps

Preparing Video For Download...