テキストと画像のRAG

Weaviate ではじめる End-to-End RAG

JP Hwang

Senior Developer Educator, Weaviate

画像はどう扱う？

 

  • Docling後の画像: <!-- image -->
  • 画像の文脈は失われる

 

  • 新しい手法: ドキュメント全体を画像として扱う

hai_ai-index-report-2025_chapter2_excerpts_8_of_8.jpg

Weaviate ではじめる End-to-End RAG

画像でのRAG

画像RAG.png

Weaviate ではじめる End-to-End RAG

マルチモーダル埋め込みモデル

帽子をかぶった猫.png

Weaviate ではじめる End-to-End RAG

画像のエンコード

画像をエンコード1.png

Weaviate ではじめる End-to-End RAG

画像のエンコード

画像をエンコード2.png

Weaviate ではじめる End-to-End RAG

画像のエンコード

画像をエンコード.png

Weaviate ではじめる End-to-End RAG

画像で拡張・生成する

 

マルチモーダルプロンプト.png

Weaviate ではじめる End-to-End RAG

演習に進みましょう！

Weaviate ではじめる End-to-End RAG

Preparing Video For Download...