Перейти к основному содержимому

Pinecone

Управляемая векторная база данных для production AI-приложений. Полностью управляемая, с автоматическим масштабированием, гибридным поиском (плотные + разреженные векторы), фильтрацией по метаданным и пространствами имён. Низкая задержка (<100 мс p95). Используется для production RAG, рекомендательных систем или семантического поиска в масштабе. Оптимальна для бессерверной, управляемой инфраструктуры.

Метаданные навыка​

ИсточникОпционально — установка с помощью vibeos skills install official/mlops/pinecone
Путьoptional-skills/mlops/pinecone
Версия1.0.0
АвторOrchestra Research
ЛицензияMIT
Зависимостиpinecone-client
Платформыlinux, macos, windows
ТегиRAG, Pinecone, Vector Database, Managed Service, Serverless, Hybrid Search, Production, Auto-Scaling, Low Latency, Recommendations

Справочник: полный SKILL.md​

к сведению

Ниже приведено полное описание навыка, которое VibeOS загружает при его активации. Агент видит эти инструкции, когда навык активен.

Pinecone — Управляемая векторная база данных

Векторная база данных для production AI-приложений.

Когда использовать Pinecone​

Используйте, когда:

  • Нужна управляемая бессерверная векторная база данных
  • Требуются production RAG-приложения
  • Необходимо автоматическое масштабирование
  • Критична низкая задержка (<100 мс)
  • Нет желания управлять инфраструктурой
  • Нужен гибридный поиск (плотные + разреженные векторы)

Метрики:

  • Полностью управляемый SaaS
  • Автоматическое масштабирование до миллиардов векторов
  • p95 задержка <100 мс
  • SLA 99,9% времени безотказной работы

Вместо этого используйте альтернативы:

  • Chroma: Самостоятельное размещение, с открытым исходным кодом
  • FAISS: Офлайн, чистый поиск по сходству
  • Weaviate: Самостоятельное размещение с большим количеством функций

Быстрый старт​

Установка​

pip install pinecone-client

Базовое использование​

from pinecone import Pinecone, ServerlessSpec

# Инициализация
pc = Pinecone(api_key="your-api-key")

# Создание индекса
pc.create_index(
name="my-index",
dimension=1536, # Должно совпадать с размерностью эмбеддинга
metric="cosine", # или "euclidean", "dotproduct"
spec=ServerlessSpec(cloud="aws", region="us-east-1")
)

# Подключение к индексу
index = pc.Index("my-index")

# Вставка векторов
index.upsert(vectors=[
{"id": "vec1", "values": [0.1, 0.2, ...], "metadata": {"category": "A"}},
{"id": "vec2", "values": [0.3, 0.4, ...], "metadata": {"category": "B"}}
])

# Запрос
results = index.query(
vector=[0.1, 0.2, ...],
top_k=5,
include_metadata=True
)

print(results["matches"])

Основные операции​

Создание индекса​

# Бессерверный (рекомендуется)
pc.create_index(
name="my-index",
dimension=1536,
metric="cosine",
spec=ServerlessSpec(
cloud="aws", # или "gcp", "azure"
region="us-east-1"
)
)

# На основе подов (для стабильной производительности)
from pinecone import PodSpec

pc.create_index(
name="my-index",
dimension=1536,
metric="cosine",
spec=PodSpec(
environment="us-east1-gcp",
pod_type="p1.x1"
)
)

Вставка векторов​

# Одиночная вставка
index.upsert(vectors=[
{
"id": "doc1",
"values": [0.1, 0.2, ...], # 1536 размерностей
"metadata": {
"text": "Содержимое документа",
"category": "tutorial",
"timestamp": "2025-01-01"
}
}
])

# Пакетная вставка (рекомендуется)
vectors = [
{"id": f"vec{i}", "values": embedding, "metadata": metadata}
for i, (embedding, metadata) in enumerate(zip(embeddings, metadatas))
]

index.upsert(vectors=vectors, batch_size=100)

Запрос векторов​

# Базовый запрос
results = index.query(
vector=[0.1, 0.2, ...],
top_k=10,
include_metadata=True,
include_values=False
)

# С фильтрацией по метаданным
results = index.query(
vector=[0.1, 0.2, ...],
top_k=5,
filter={"category": {"$eq": "tutorial"}}
)

# Запрос в пространстве имён
results = index.query(
vector=[0.1, 0.2, ...],
top_k=5,
namespace="production"
)

# Доступ к результатам
for match in results["matches"]:
print(f"ID: {match['id']}")
print(f"Score: {match['score']}")
print(f"Metadata: {match['metadata']}")

Фильтрация по метаданным​

# Точное совпадение
filter = {"category": "tutorial"}

# Сравнение
filter = {"price": {"$gte": 100}} # $gt, $gte, $lt, $lte, $ne

# Логические операторы
filter = {
"$and": [
{"category": "tutorial"},
{"difficulty": {"$lte": 3}}
]
} # Также: $or

# Оператор in
filter = {"tags": {"$in": ["python", "ml"]}}

Пространства имён​

# Разделение данных по пространству имён
index.upsert(
vectors=[{"id": "vec1", "values": [...]}],
namespace="user-123"
)

# Запрос в конкретном пространстве имён
results = index.query(
vector=[...],
namespace="user-123",
top_k=5
)

# Список пространств имён
stats = index.describe_index_stats()
print(stats['namespaces'])

Гибридный поиск (плотные + разреженные векторы)​

# Вставка с разреженными векторами
index.upsert(vectors=[
{
"id": "doc1",
"values": [0.1, 0.2, ...], # Плотный вектор
"sparse_values": {
"indices": [10, 45, 123], # ID токенов
"values": [0.5, 0.3, 0.8] # TF-IDF оценки
},
"metadata": {"text": "..."}
}
])

# Гибридный запрос
results = index.query(
vector=[0.1, 0.2, ...],
sparse_vector={
"indices": [10, 45],
"values": [0.5, 0.3]
},
top_k=5,
alpha=0.5 # 0=разреженный, 1=плотный, 0.5=гибридный
)

Интеграция с LangChain​

from langchain_pinecone import PineconeVectorStore
from langchain_openai import OpenAIEmbeddings

# Создание векторного хранилища
vectorstore = PineconeVectorStore.from_documents(
documents=docs,
embedding=OpenAIEmbeddings(),
index_name="my-index"
)

# Запрос
results = vectorstore.similarity_search("query", k=5)

# С фильтром по метаданным
results = vectorstore.similarity_search(
"query",
k=5,
filter={"category": "tutorial"}
)

# Как ретривер
retriever = vectorstore.as_retriever(search_kwargs={"k": 10})

Интеграция с LlamaIndex​

from llama_index.vector_stores.pinecone import PineconeVectorStore

# Подключение к Pinecone
pc = Pinecone(api_key="your-key")
pinecone_index = pc.Index("my-index")

# Создание векторного хранилища
vector_store = PineconeVectorStore(pinecone_index=pinecone_index)

# Использование в LlamaIndex
from llama_index.core import StorageContext, VectorStoreIndex

storage_context = StorageContext.from_defaults(vector_store=vector_store)
index = VectorStoreIndex.from_documents(documents, storage_context=storage_context)

Управление индексами​

# Список индексов
indexes = pc.list_indexes()

# Описание индекса
index_info = pc.describe_index("my-index")
print(index_info)

# Получение статистики индекса
stats = index.describe_index_stats()
print(f"Всего векторов: {stats['total_vector_count']}")
print(f"Пространства имён: {stats['namespaces']}")

# Удаление индекса
pc.delete_index("my-index")

Удаление векторов​

# Удаление по ID
index.delete(ids=["vec1", "vec2"])

# Удаление по фильтру
index.delete(filter={"category": "old"})

# Удаление всего в пространстве имён
index.delete(delete_all=True, namespace="test")

# Удаление всего индекса
index.delete(delete_all=True)

Лучшие практики​

  1. Используйте бессерверный режим — Автоматическое масштабирование, экономичность
  2. Пакетная вставка — Более эффективно (100-200 за пакет)
  3. Добавляйте метаданные — Включают фильтрацию
  4. Используйте пространства имён — Изолируйте данные по пользователю/арендатору
  5. Мониторьте использование — Проверяйте панель управления Pinecone
  6. Оптимизируйте фильтры — Индексируйте часто фильтруемые поля
  7. Тестируйте на бесплатном тарифе — 1 индекс, 100K векторов бесплатно
  8. Используйте гибридный поиск — Лучшее качество
  9. Устанавливайте подходящую размерность — Соответствуйте модели эмбеддинга
  10. Регулярное резервное копирование — Экспортируйте важные данные

Производительность​

ОперацияЗадержкаПримечания
Вставка~50-100 мсЗа пакет
Запрос (p50)~50 мсЗависит от размера индекса
Запрос (p95)~100 мсЦелевой SLA
Фильтр по метаданным~+10-20 мсДополнительные накладные расходы

Ценообразование (по состоянию на 2025 год)​

Бессерверный:

  • $0.096 за миллион единиц чтения
  • $0.06 за миллион единиц записи
  • $0.06 за ГБ хранилища в месяц

Бесплатный тариф:

  • 1 бессерверный индекс
  • 100K векторов (1536 размерностей)
  • Отлично подходит для прототипирования

Ресурсы​