Nạp vector

Xây dựng ứng dụng AI với Pinecone

James Chapman

Curriculum Manager, DataCamp

Tạo và kết nối index

pc = Pinecone(api_key="API_KEY")

pc.create_index(
    name='datacamp-index',
    dimension=1536,
    spec=ServerlessSpec(
        cloud='aws', 
        region='us-east-1'
    )
)

index = pc.Index('datacamp-index')
Xây dựng ứng dụng AI với Pinecone

Nạp vector

vectors = [
    {
        "id": "0",
        "values": [0.025525547564029694, ..., 0.0188823901116848]
    },
        ...,
    {
        "id": "9",
        "values": [0.020712468773126602, ..., 0.006418442353606224]
    },
]
Xây dựng ứng dụng AI với Pinecone

Kiểm tra số chiều

vector_dims = [len(vector['values']) == 1536 for vector in vectors]

all(vector_dims)
True
PineconeApiException: (400)
Reason: Bad Request
HTTP response headers: HTTPHeaderDict({'Date': 'Fri, 17 May 2024 10:54:57 GMT', ...
HTTP response body: {"code":3,"message":"Vector dimension 256 does not match the
dimension of the index 1536","details":[]}
Xây dựng ứng dụng AI với Pinecone

Upsert vector

  • .upsert(): cập nhật hoặc chèn
index.upsert(

vectors=vectors
)
index.describe_index_stats()
{'dimension': 1536,
 'index_fullness': 0.0,
 'namespaces': {'': {'vector_count': 10}},
 'total_vector_count': 10}
Xây dựng ứng dụng AI với Pinecone

Nạp vector kèm metadata

vectors = [
    {
        "id": "0",
        "values": [0.025525547564029694, ..., 0.0188823901116848]
        "metadata": {"genre": "productivity", "year": 2020}
    },
        ...,
]
  • Metadata: dữ liệu về dữ liệu
    • Dùng để lọc theo metadataChương 2
Xây dựng ứng dụng AI với Pinecone

Upsert vector kèm metadata

index.upsert(
    vectors=vectors
)

Nhớ dùng cấu trúc:

    {
        "id": "0",
        "values": [0.025525547564029694, ..., 0.0188823901116848]
        "metadata": {"genre": "productivity", "year": 2020}
    },
        ...,
Xây dựng ứng dụng AI với Pinecone

Ayo berlatih!

Xây dựng ứng dụng AI với Pinecone

Preparing Video For Download...