Перейти к основному содержанию

База знаний AI-чата

Около 2 мин

База знаний AI-чата (RAG)

База знаний позволяет загрузить справочные документы вашего сервиса (статьи хелпа, регламенты, инструкции), и AI-чат будет отвечать пользователям, опираясь на их содержимое, а не выдумывая. Технически это RAG — Retrieval-Augmented Generation.

Только при включённом AI-модуле

База знаний — часть AI-модуля. Раздел доступен, если AI-модуль входит в вашу лицензию и включён. Если лицензия активна, но AI-модуль не подключён, вкладка «База знаний» в админке показывается только для ознакомления — настройки видны, но изменять их нельзя (отмечены замком). Чтобы пользоваться — подключите AI-модуль.

Как это работает

При загрузке документа:

  1. Документ режется на небольшие фрагменты (чанки) с нахлёстом.
  2. Каждый фрагмент превращается в вектор (эмбеддинг) — локальной моделью прямо на сервере, без обращения к внешним сервисам (текст документов никуда не уходит).
  3. Векторы и оригинал сохраняются в базе (Postgres + расширение pgvector).

Когда пользователь пишет в чат:

  1. По его вопросу система ищет наиболее подходящие фрагменты — гибридно: и по смыслу (векторный поиск), и по точным словам (полнотекстовый поиск). Векторный ловит синонимы, словесный — точные термины, коды, аббревиатуры.
  2. Подходящие фрагменты подкладываются модели как справочный материал.
  3. Модель формирует ответ по ним и, при необходимости, ссылается на источник.

Справка ≠ действие

Если пользователь просит выполнить действие («создай роль X»), чат выполняет его через инструменты, а не пересказывает инструкцию. База знаний используется для ответов на вопросы («как создать роль?»), а не вместо действий.

Параметры и значения по умолчанию

Параметры задаются в админке и применяются без перезапуска.

ПараметрПо умолчаниюЧто делаетНужна переиндексация?
Размер чанка320На сколько токенов резать документ при индексации. Меньше — точнее, но обрывистее; больше — размывает смысл.да
Нахлёст чанков48Перекрытие соседних фрагментов (≈10–15 %) — сохраняет смысл на стыках.да
Порог релевантности0.84Минимальная близость фрагмента, чтобы попасть в ответ чата. Ниже порога — в ответ не идёт.нет
Фрагментов в ответ (topK)4Сколько фрагментов подкладывать модели. Обычно 3–5.нет
Гибридный поисквклСовмещать смысловой и словесный поиск. Рекомендуется оставить включённым.нет

Размер чанка измеряется в условных токенах

Размер чанка считается во внутренних токенах индексатора, а не в токенах модели эмбеддингов. На русском они расходятся: значение 320 ≈ 230–275 токенов модели при её лимите 512 — то есть с запасом. Безопасный потолок — около 600. Не поднимайте размер чанка к 512 «потому что модель держит 512» — это разные единицы, иначе часть текста будет обрезана при индексации.

Что и где менять

Всё — в админке (нужны права полного доступа):

  • Администрирование → вкладка «База знаний» — основной экран:
    • Загрузка / обновление документов (.md, .txt). Кнопка-«глаз» — просмотр оригинала, кнопка обновления — заменить файл, корзина — удалить (с подтверждением).
    • «Проверить поиск» — вводите запрос и смотрите, какие фрагменты и с какой близостью поднимаются, ещё до ответа модели. Бейдж «по словам» означает точное словесное совпадение. Главный инструмент отладки.
    • Параметры — размер чанка, нахлёст, порог, topK, гибрид + кнопка «Переиндексировать».
  • Администрирование → «Настройки приложения» — те же параметры доступны и здесь (раздел AI), как обычные настройки.

Когда нажимать «Переиндексировать»

После изменения размера чанка или нахлёста нужно переиндексировать — система заново разрежет и пересчитает все документы (из сохранённых оригиналов). Порог, topK и гибрид применяются сразу, без переиндексации.

Как подобрать параметры

Тюнить «на глаз» бесполезно — используйте «Проверить поиск»:

  1. Соберите 10–15 типичных вопросов пользователей.
  2. Прогоняйте их, меняя один параметр за раз.
  3. Смотрите: попадает ли нужная статья в топ и выше ли её близость, чем у нерелевантной.
  4. Сменили размер чанка/нахлёст — нажмите «Переиндексировать».

Наибольший эффект дают качество исходных статей и размер чанка, а не подкрутка порога. Чистые, структурированные статьи под конкретные вопросы работают лучше всего.

Модель эмбеддингов

Используется компактная многоязычная модель (multilingual-e5-small), которая работает локально на сервере. Она поставляется вместе с системой — отдельная настройка не требуется. Данные документов при индексации и поиске не покидают сервер.