ドキュメントの保存とクエリ

LangChainで学ぶ検索拡張生成(RAG)

Meri Nova

Machine Learning Engineer

Neo4jデータベースのインスタンス化

from langchain_community.graphs import Neo4jGraph

graph = Neo4jGraph(url="bolt://localhost:7687", username="neo4j", password="...")
import os

url = os.environ["NEO4J_URI"]
user = os.environ["NEO4J_USERNAME"]
password = os.environ["NEO4J_PASSWORD"]

graph = Neo4jGraph(url=url, username=user, password=password)
1 https://neo4j.com/download/
LangChainで学ぶ検索拡張生成(RAG)

グラフドキュメントの保存

from langchain_experimental.graph_transformers import LLMGraphTransformer

llm = ChatOpenAI(api_key="...", temperature=0, model="gpt-4o-mini")
llm_transformer = LLMGraphTransformer(llm=llm)

graph_documents = llm_transformer.convert_to_graph_documents(documents)
LangChainで学ぶ検索拡張生成(RAG)

グラフドキュメントの保存

graph.add_graph_documents(
  graph_documents,

include_source=True,
baseEntityLabel=True
)
  • include_source=TrueMENTIONSエッジでノードとソースドキュメントを紐づける
  • baseEntityLabel=True:各ノードに__Entity__ラベルを付与
LangChainで学ぶ検索拡張生成(RAG)

グラフドキュメントがノードとエッジとして表現されている。

LangChainで学ぶ検索拡張生成(RAG)

前の画像を拡大し、OpenAIモデルに関するノードを表示している。

LangChainで学ぶ検索拡張生成(RAG)

データベーススキーマ

print(graph.get_schema)
Node properties:
Concept {id: STRING}
Architecture {id: STRING}
Organization {id: STRING}
Event {id: STRING}
Paper {id: STRING}

The relationships:
(:Concept)-[:DEVELOPED_BY]->(:Person)
(:Architecture)-[:BASED_ON]->(:Concept)
(:Organization)-[:PROPOSED]->(:Concept)
(:Document)-[:MENTIONS]->(:Event)
(:Paper)-[:BASED_ON]->(:Concept)
LangChainで学ぶ検索拡張生成(RAG)

Neo4jのクエリ - Cypher

Jamesというノードから「friends」というリレーションシップがある人物のノードに向かっている図。

LangChainで学ぶ検索拡張生成(RAG)

Neo4jのクエリ - Cypher

cypher4.jpg

LangChainで学ぶ検索拡張生成(RAG)

Neo4jのクエリ - Cypher

cypher4.jpg

LangChainで学ぶ検索拡張生成(RAG)

Neo4jのクエリ - Cypher

cypher4.jpg

LangChainで学ぶ検索拡張生成(RAG)

Neo4jのクエリ - Cypher

cypher4.jpg

LangChainで学ぶ検索拡張生成(RAG)

LLMグラフでのクエリ

results = graph.query("""
MATCH (gpt4:Model {id: "Gpt-4"})-[:DEVELOPED_BY]->(org:Organization)
RETURN org
""")

print(results)
[{'org': {'id': 'Openai'}}]
LangChainで学ぶ検索拡張生成(RAG)

お疲れさまでした!

LangChainで学ぶ検索拡張生成(RAG)

Preparing Video For Download...