Nouveauté des LLM

Concepts des grands modèles de langage (LLM)

Vidhi Chugh

AI strategist and ethicist

Utilisation de données textuelles

Une image illustrant l'analyse des sentiments, la détection des spams et les assistants numériques

  • Données non structurées - désordonnées et incohérentes
1 Freepik
Concepts des grands modèles de langage (LLM)

Les machines ne comprennent pas le langage !

Une illustration démontrant l'incapacité d'un ordinateur à interpréter le langage tel quel.

1 Freepik
Concepts des grands modèles de langage (LLM)

Nécessité du traitement du langage naturel

 

Une image illustrant le NLP comme un pont entre le texte et les chiffres, qui sont ensuite interprétés par l'ordinateur.

1 Freepik
Concepts des grands modèles de langage (LLM)

Capacités uniques des LLM

 

  • Subtilités linguistiques
    • Ironie
    • Humour
    • Jeu de mots
    • Sarcasme
    • Intonation
    • Intention

Une personne debout avec un bloc-notes pointant vers un texte générique et un grand point d'interrogation

1 Freepik
Concepts des grands modèles de langage (LLM)

Quel est votre livre préféré ?

 

  • Réponse naturelle : « Oh, c'est une question difficile ! »

 

  • Opinion personnelle : « Mon livre préféré est Ne tirez pas sur l'oiseau moqueur de Harper Lee. »

 

  • Déclaration justificative : « C'est une histoire forte sur les préjugés, la justice et l'expérience humaine. »

 

  • Question complémentaire : « Avez-vous eu l'occasion de le lire ? »
Concepts des grands modèles de langage (LLM)

Subtilités linguistiques

Sarcasme : « Oh, super, une autre réunion. »

Modèle de langage traditionnel :

  • Réponse : « Quel est l'objet de la réunion ? »
    • Neutre
    • Ne perçoit pas le sarcasme

 

Grand modèle de langage :

  • Réponse : « On dirait que vous êtes impatient d'y être ! »
    • Ludique
    • Intéressant
    • Correspond au sarcasme
Concepts des grands modèles de langage (LLM)

Comment les LLM comprennent-ils ?

 

  • Entraîné sur de grandes quantités de données

  • Envergure des LLM : selon les paramètres

  • Les paramètres représentent les modèles et les règles

  • Plus de paramètres supplémentaires > plus les modèles sont complexes

  • Génère des réponses sophistiquées et précises

Concepts des grands modèles de langage (LLM)

Paramètres

 

  • Petit nombre de briques -> Structures limitées

Une image présentant un nombre restreint de blocs

 

  • Plus grand nombre de briques -> Structures complexes et détaillées

Une image représentant un grand nombre de briques

Concepts des grands modèles de langage (LLM)

Apparition de nouvelles capacités

 

  • Capacités émergentes
    • uniquement disponibles dans les modèles à grande échelle

 

  • Échelle :

    • Le volume des données d'entraînement
    • Le nombre de paramètres du modèle

 

Graphique illustrant l'amélioration soudaine des performances du modèle lorsque son échelle dépasse un seuil de transition.

Concepts des grands modèles de langage (LLM)

Apparition de nouvelles capacités

 

Une image illustrant de nouvelles fonctionnalités telles que la musique, la poésie, la génération de code, le diagnostic médical et les groupes de traitement

Concepts des grands modèles de langage (LLM)

Éléments constitutifs des LLM

Éléments constitutifs des LLM

Concepts des grands modèles de langage (LLM)

Récapitulons :

Les LLM :

  • Surmontent la nature non structurée des données

 

  • Surpassent les modèles traditionnels

 

  • Comprennent les subtilités linguistiques

Comment ?

  • « Grandeur » des LLM
  • Données d’entraînement exhaustives
  • De nombreux paramètres
  • Capacités émergentes
Concepts des grands modèles de langage (LLM)

Passons à la pratique !

Concepts des grands modèles de langage (LLM)

Preparing Video For Download...