VecThor

Платформа семантического поиска

Гибридная архитектура: Go + Python + Elasticsearch

Изолированная демо-среда с тестовыми данными для ознакомления с платформой

Для каких задач?

Быстрый и точный поиск

Нужно быстро и точно искать по корпоративной базе знаний и документам.

Готовый backend для чат‑бота

Нужно интегрировать в SaaS или продукт ИИ‑чат‑ботов, бэкенд нужен «вчера».

API для умного поиска/поддержки

Нужен API для реализации умного поиска или чат‑бота службы поддержки.

Приватность и доступ

Нужно хранить приватные данные: приватные индексы, роли и аудит доступа.

Единый поиск по источникам

Нужно объединить сайты, CRM, базы знаний, PDF и другие источники.

Масштаб и надёжность

Нужно масштабировать поиск и чат‑бота под высокую нагрузку и SLA.

Технологический стек

Backend (Go)

• Go API Gateway - высокопроизводительный REST API
• gRPC - межсервисное взаимодействие
• RRF гибридное ранжирование (BM25 + векторы)
• JWT - авторизация

ML Backend (Python)

• FastAPI - асинхронный REST API
• Transformers - языковые модели
• Sentence-BERT - эмбеддинги
• RQ - очереди фоновых задач
• OpenRouter - интеграции с LLM
• RAG по документам

Хранение данных

• Elasticsearch - полнотекстовый и векторный поиск
• PostgreSQL - реляционная БД
• Redis - кэширование
• Qdrant или PGVector - альтернативная векторная БД

Frontend

• Next.js - React-фреймворк
• TypeScript - типизированный JS
• TailwindCSS - утилитарные стили
• ShadcnUI - компонентная библиотека

Инфраструктура

• Docker Compose - оркестрация
• Nginx - reverse proxy
• Keycloak - управление пользователями или быстрое подключение через абстракцию другого сервиса авторизации
• Certbot - SSL сертификаты

Возможности

• Семантический поиск
• Гибридный поиск
• Веб-краулинг
• Мониторинг и метрики
• Интеграции с LLM через OpenRouter
• RAG‑поиск по документам

Поиск

Режимы

Гибридный поиск (BM25 + векторы, RRF)
Векторный и текстовый режимы
Фильтры и пагинация

API

POST /search — unified endpoint
POST /projects/{id}/search — по проекту
GET /projects/{slug}/search?q=... — по slug

Чанкинг

Стратегии

balanced (≈300/50)
recursive (≈1000/200) для веб‑страниц

Эмбеддинги

intfloat/multilingual-e5-small (384‑dims)
Трассировка и объяснения ранжирования

Загрузка документов

Форматы и API

POST /collections/{collection_id}/documents
POST /collections/{collection_id}/documents/upload (multipart)

Индексирование

Авточанкинг и эмбеддинги при загрузке
Хранение в Elasticsearch + Qdrant/PG

Краулинг сайтов

Настройки

URLs, max_depth, max_pages, delay, user_agent
Respect robots.txt

API

POST /collections/crawl — старт задачи
GET /crawling/status/{task_id} — статус
DELETE /crawling/stop/{task_id} — стоп

Попробовать сейчас

Поиск души в машине

«Ищем смысл жизни в 768 измерениях»

VecThor

🎯 Для каких задач?

Быстрый и точный поиск

Готовый backend для чат‑бота

API для умного поиска/поддержки

Приватность и доступ

Единый поиск по источникам

Масштаб и надёжность

🛠 Технологический стек

⚡ Backend (Go)

🧠 ML Backend (Python)

🗄 Хранение данных

🎨 Frontend

🔧 Инфраструктура

📊 Возможности

🔎 Поиск