Интеграция с LlamaIndex

Нативный ретривер для движков запросов LlamaIndex с потоковой передачей и гибридным поиском.

01Обзор за 60 секунд

SeiznRetriever реализует интерфейс BaseRetriever LlamaIndex, обеспечивая совместимость со всеми движками запросов и пайплайнами LlamaIndex.

✓Нативная интеграция с движками запросов LlamaIndex
✓Встроенная поддержка потоковых ответов
✓Совместимость с постпроцессорами узлов LlamaIndex

02Установка

Установите Seizn SDK вместе с LlamaIndex.

Installationbash

# TypeScript / JavaScript
npm install seizn llamaindex

# Python
pip install seizn llama-index

03Пример за 5 минут

Создайте движок запросов с SeiznRetriever для Вашего RAG-приложения.

TypeScripttypescript

import { SeiznRetriever } from 'seizn/llamaindex';
import { OpenAI } from 'llamaindex';
import { VectorStoreIndex, RetrieverQueryEngine } from 'llamaindex';

// Initialize the Seizn retriever
const retriever = new SeiznRetriever({
  apiKey: process.env.SEIZN_API_KEY,
  dataset: 'my-docs',
  topK: 5,
  threshold: 0.7,
});

// Create a query engine with the retriever
const llm = new OpenAI({ model: 'gpt-4' });
const queryEngine = new RetrieverQueryEngine(retriever, llm);

// Query your documents
const response = await queryEngine.query(
  'How do I configure rate limiting?'
);

console.log(response.response);
// Access the trace for debugging
console.log('Trace:', response.metadata?.seiznTrace);

Pythonpython

import os
from seizn.llamaindex import SeiznRetriever
from llama_index.llms.openai import OpenAI
from llama_index.core.query_engine import RetrieverQueryEngine

# Initialize the Seizn retriever
retriever = SeiznRetriever(
    api_key=os.environ["SEIZN_API_KEY"],
    dataset="my-docs",
    top_k=5,
    threshold=0.7,
)

# Create a query engine with the retriever
llm = OpenAI(model="gpt-4")
query_engine = RetrieverQueryEngine.from_args(
    retriever=retriever,
    llm=llm,
)

# Query your documents
response = query_engine.query(
    "How do I configure rate limiting?"
)

print(response.response)
# Access the trace for debugging
print("Trace:", response.metadata.get("seizn_trace"))

04Советы для продакшена

Потоковые ответы

Включите потоковую передачу для улучшения пользовательского опыта при длинных ответах.

typescript

const queryEngine = new RetrieverQueryEngine(retriever, llm);

// Enable streaming response
const stream = await queryEngine.query(
  'Explain the authentication flow',
  { streaming: true }
);

for await (const chunk of stream) {
  process.stdout.write(chunk.response);
}

Гибридный поиск

Комбинируйте векторный и ключевой поиск для лучшей полноты результатов.

typescript

const retriever = new SeiznRetriever({
  apiKey: process.env.SEIZN_API_KEY,
  dataset: 'my-docs',
  searchMode: 'hybrid', // vector + keyword
  hybridAlpha: 0.7,     // 70% vector, 30% keyword
});

Постпроцессоры узлов

Объединяйте постпроцессоры для продвинутой фильтрации и переранжирования.

typescript

import { SimilarityPostprocessor, KeywordNodePostprocessor } from 'llamaindex';

const queryEngine = new RetrieverQueryEngine(retriever, llm, {
  nodePostprocessors: [
    new SimilarityPostprocessor({ similarityCutoff: 0.7 }),
    new KeywordNodePostprocessor({
      requiredKeywords: ['authentication'],
      excludeKeywords: ['deprecated'],
    }),
  ],
});

05Устранение неполадок

Ошибка	Причина	Решение
`SEIZN_AUTH_ERROR`	Недействительный или отсутствующий API-ключ	Проверьте переменную окружения SEIZN_API_KEY
`SEIZN_DATASET_NOT_FOUND`	Имя датасета не найдено	Убедитесь, что датасет существует в панели управления
`Low relevance scores`	Несоответствие запроса и документов	Попробуйте гибридный поиск или измените порог

Интеграция с LangChain Интеграция с OpenTelemetry