まとめ

Hugging Faceを使いこなす

Jacob H. Marquez

Lead Data Engineer

第1章

$$

  • 🌐 Hugging Face Hub： AIモデルとデータセットを見つけるためのプラットフォーム

Hugging Faceロゴ

Hugging Faceを使いこなす

第2章

Hugging Face パイプライン

Hugging Faceを使いこなす

テキスト分類

  • 📊感情分析： 顧客の感情を判定する

$$

  • 📝 文法チェック： テキスト内の間違いを特定する

$$

  • 🔓 カテゴリ割り当て： リクエストを信頼度スコアをつけて分類する

$$

pipeline(task="text-classification")

感情分析

[{'label': 'POSITIVE', 'score': 0.97}]
Hugging Faceを使いこなす

テキスト要約

テキスト要約の例

  • 🔧 パイプライン： pipeline(task="summarization")を指定
  • 📜 出力の長さ： min_new_tokensとmax_new_tokensで調整する
Hugging Faceを使いこなす

ドキュメントQ&A

文書から答えを見つける

$$

$$

  • 📄 PDF処理： pypdfから.pagesと.extract_text()を使用してテキストを抽出する

$$

  • ❓ Q&Aパイプライン： pipeline(task="question-answering")を指定
Hugging Faceを使いこなす

AutoModelとTokenizer

より多くの制御とカスタマイズ

Hugging Faceを使いこなす

おめでとうございます！

Hugging Faceを使いこなす

Preparing Video For Download...