Büyük dil modellerine (LLM) giriş

Python ile LLM'lere Giriş

Jasmin Ludolf

Senior Data Science Content Developer, DataCamp

Ön bilgi

Hugging Face Hub'da gezinme
Derin öğrenme modelleri

Anlamayı temsil eden ampul ve beyin simgesi

LLM'lere giriş

Anlamayı temsil eden ampul ve beyin simgesi

LLM'lere giriş

Kullanımı temsil eden dizüstü bilgisayar illüstrasyonu

Büyük bir dil modelinin soyut illüstrasyonu

Özetleme baloncuğuyla büyük bir dil modelinin soyut illüstrasyonu

Özetleme ve üretme baloncuklarıyla büyük bir dil modelinin soyut illüstrasyonu

Özetleme, üretme ve çeviri baloncuklarıyla büyük bir dil modelinin soyut illüstrasyonu

Özetleme, üretme, çeviri, Soru-Cevap baloncuklarıyla büyük bir dil modelinin soyut illüstrasyonu

LLM logoları

LLM'ler

Derin öğrenme mimarilerine dayanır

En yaygını transformerlardır

Çok sayıda parametre ve metin verisine sahip büyük sinir ağları

Hugging Face modellerini kullanma

from transformers import pipeline


summarizer = pipeline(task="summarization", model="facebook/bart-large-cnn")


text = "Walking amid Gion's Machiya wooden houses is a mesmerizing experience. The 
beautifully preserved structures exuded an old-world charm that transports visitors
back in time, making them feel like they had stepped into a living museum. The glow of 
lanterns lining the narrow streets add to the enchanting ambiance, making each stroll a
memorable journey through Japan's rich cultural history."

summary = summarizer(text, max_length=50)

clean_up_tokenization_spaces=True: gereksiz boşlukları kaldırır

Model çıktıları

print(summary)

[{'summary_text': "Gion's Machiya
  wooden houses exuded an old-world 
  charm that transports visitors back 
  in time. The glow of lanterns lining 
  the narrow streets add to the 
  enchanting ambiance, making each 
  stroll a memorable journey through 
  Japan's"}]

print(summary[0]["summary_text"])

Gion's Machiya wooden houses exuded an 
old-world charm that transports 
visitors back in time. The glow of 
lanterns lining the narrow streets add 
to the enchanting ambiance, making each 
stroll a memorable journey through 
Japan's

Sırada ne var

Mevcut LLM bilgisi üzerine inşa edin
Yeni görevler gerçekleştirin
LLM'lerin nasıl kurulduğunu görün
LLM'leri ince ayarlayın
LLM performansını değerlendirin

Öğrenme yolu

Haydi pratik yapalım!

Python ile LLM'lere Giriş