Інтеграція з LlamaIndex

Нативний ретривер для движків запитів LlamaIndex з потоковою передачею та гібридним пошуком.

01Огляд за 60 секунд

SeiznRetriever реалізує інтерфейс BaseRetriever LlamaIndex, забезпечуючи сумісність з усіма движками запитів та пайплайнами LlamaIndex.

✓Нативна інтеграція з движками запитів LlamaIndex
✓Вбудована підтримка потокових відповідей
✓Сумісність із постпроцесорами вузлів LlamaIndex

02Встановлення

Встановіть Seizn SDK разом із LlamaIndex.

Installationbash

# TypeScript / JavaScript
npm install seizn llamaindex

# Python
pip install seizn llama-index

03Приклад за 5 хвилин

Створіть движок запитів із SeiznRetriever для Вашого RAG-застосунку.

TypeScripttypescript

import { SeiznRetriever } from 'seizn/llamaindex';
import { OpenAI } from 'llamaindex';
import { VectorStoreIndex, RetrieverQueryEngine } from 'llamaindex';

// Initialize the Seizn retriever
const retriever = new SeiznRetriever({
  apiKey: process.env.SEIZN_API_KEY,
  dataset: 'my-docs',
  topK: 5,
  threshold: 0.7,
});

// Create a query engine with the retriever
const llm = new OpenAI({ model: 'gpt-4' });
const queryEngine = new RetrieverQueryEngine(retriever, llm);

// Query your documents
const response = await queryEngine.query(
  'How do I configure rate limiting?'
);

console.log(response.response);
// Access the trace for debugging
console.log('Trace:', response.metadata?.seiznTrace);

Pythonpython

import os
from seizn.llamaindex import SeiznRetriever
from llama_index.llms.openai import OpenAI
from llama_index.core.query_engine import RetrieverQueryEngine

# Initialize the Seizn retriever
retriever = SeiznRetriever(
    api_key=os.environ["SEIZN_API_KEY"],
    dataset="my-docs",
    top_k=5,
    threshold=0.7,
)

# Create a query engine with the retriever
llm = OpenAI(model="gpt-4")
query_engine = RetrieverQueryEngine.from_args(
    retriever=retriever,
    llm=llm,
)

# Query your documents
response = query_engine.query(
    "How do I configure rate limiting?"
)

print(response.response)
# Access the trace for debugging
print("Trace:", response.metadata.get("seizn_trace"))

04Поради для продакшену

Потокові відповіді

Увімкніть потокову передачу для покращення досвіду користувача при довгих відповідях.

typescript

const queryEngine = new RetrieverQueryEngine(retriever, llm);

// Enable streaming response
const stream = await queryEngine.query(
  'Explain the authentication flow',
  { streaming: true }
);

for await (const chunk of stream) {
  process.stdout.write(chunk.response);
}

Гібридний пошук

Поєднуйте векторний та ключовий пошук для кращої повноти результатів.

typescript

const retriever = new SeiznRetriever({
  apiKey: process.env.SEIZN_API_KEY,
  dataset: 'my-docs',
  searchMode: 'hybrid', // vector + keyword
  hybridAlpha: 0.7,     // 70% vector, 30% keyword
});

Постпроцесори вузлів

Об'єднуйте постпроцесори для складної фільтрації та переранжування.

typescript

import { SimilarityPostprocessor, KeywordNodePostprocessor } from 'llamaindex';

const queryEngine = new RetrieverQueryEngine(retriever, llm, {
  nodePostprocessors: [
    new SimilarityPostprocessor({ similarityCutoff: 0.7 }),
    new KeywordNodePostprocessor({
      requiredKeywords: ['authentication'],
      excludeKeywords: ['deprecated'],
    }),
  ],
});

05Усунення неполадок

Помилка	Причина	Рішення
`SEIZN_AUTH_ERROR`	Недійсний або відсутній API-ключ	Перевірте змінну середовища SEIZN_API_KEY
`SEIZN_DATASET_NOT_FOUND`	Назву датасету не знайдено	Переконайтесь, що датасет існує в панелі керування
`Low relevance scores`	Невідповідність запиту та документів	Спробуйте гібридний пошук або змініть поріг

Інтеграція з LangChain Інтеграція з OpenTelemetry