Einführung in große Sprachmodelle (LLMs)

Einführung in LLMs mit Python

Jasmin Ludolf

Senior Data Science Content Developer, DataCamp

Vorkenntnisse

  • Umgang mit dem Hugging Face Hub
  • Deep-Learning-Modelle

Cartoon-Gehirn liest ein Buch

Einführung in LLMs mit Python

Einführung in LLMs

 

Symbol einer Glühbirne und eines Gehirns, um Verständnis darzustellen

Einführung in LLMs mit Python

Einführung in LLMs

 

Bild von einem Laptop veranschaulicht die Nutzung

Einführung in LLMs mit Python

Abstrakte Illustration eines großen Sprachmodells

Einführung in LLMs mit Python

Abstrakte Illustration eines großen Sprachmodells mit einer Denkblase zu Zusammenfassungen

Einführung in LLMs mit Python

Abstrakte Abbildung eines großen Sprachmodells mit Denkblasen zur Zusammenfassung und zur Generierung

Einführung in LLMs mit Python

Abstrakte Darstellung eines großen Sprachmodells mit Denkblasen zur Zusammenfassung, Generierung und Übersetzung

Einführung in LLMs mit Python

Abstrakte Darstellung eines großen Sprachmodells mit Denkblasen zur Zusammenfassung, Generierung, Übersetzung und Antwortgenerierung

LLM-Logos

Einführung in LLMs mit Python

LLMs

 

  • Basieren auf Deep-Learning-Architekturen

 

  • In der Regel Transformer

 

  • Riesige neuronale Netze mit vielen Parametern und Textdaten

Hugging Face-Logo

Einführung in LLMs mit Python

Einsatz von Hugging Face-Modellen

from transformers import pipeline


summarizer = pipeline(task="summarization", model="facebook/bart-large-cnn")


text = "Walking amid Gion's Machiya wooden houses is a mesmerizing experience. The 
beautifully preserved structures exuded an old-world charm that transports visitors
back in time, making them feel like they had stepped into a living museum. The glow of 
lanterns lining the narrow streets add to the enchanting ambiance, making each stroll a
memorable journey through Japan's rich cultural history."

summary = summarizer(text, max_length=50)
  • clean_up_tokenization_spaces=True: unnötige Leerzeichen werden entfernt
Einführung in LLMs mit Python

Modellausgaben

print(summary)

[{'summary_text': "Gion's Machiya
  wooden houses exuded an old-world 
  charm that transports visitors back 
  in time. The glow of lanterns lining 
  the narrow streets add to the 
  enchanting ambiance, making each 
  stroll a memorable journey through 
  Japan's"}]

print(summary[0]["summary_text"])

Gion's Machiya wooden houses exuded an 
old-world charm that transports 
visitors back in time. The glow of 
lanterns lining the narrow streets add 
to the enchanting ambiance, making each 
stroll a memorable journey through 
Japan's
Einführung in LLMs mit Python

Nächste Inhalte

 

  • Vertiefung von vorhandenem LLM-Wissen
  • Neue Aufgaben
  • Aufbau von LLMs
  • Feinabstimmung von LLMs
  • Bewertung der Leistung von LLMs

Lernpfad

Einführung in LLMs mit Python

Lass uns üben!

Einführung in LLMs mit Python

Preparing Video For Download...