Сайты

Обновлено 7 ноября 2026 г.

Самый быстрый способ наполнить базу знаний — отсканировать сайт. Кабинет пройдёт по страницам, вытащит текст и добавит каждую страницу как материал.

Добавить сайт

В «Базе знаний», блок «Сайты» → «+ Сайт».
Введите адрес (можно без https://), при желании — название.
При необходимости поменяйте ограничения: «Макс. страниц» (по умолчанию 50) и «Макс. глубина ссылок» (по умолчанию 3 — сколько переходов от главной).
Нажмите «Начать сканирование».

Сканирование идёт в фоне, карточка сайта показывает прогресс: сколько страниц найдено, проиндексировано, с ошибками. Один и тот же домен дважды добавить нельзя — кабинет подскажет, что сайт уже есть.

Что внутри карточки сайта

Раскройте карточку — список страниц, сгруппированных по разделам сайта (по первому сегменту адреса). Есть поиск по адресу и названию. У каждой страницы — статус и дата индексации; клик открывает текст, а «Открыть оригинал» — саму страницу.

Действия:

Обновить — пройти по сайту заново. Кабинет скачает все страницы, но заново разберёт только те, где текст действительно поменялся, — остальные останутся как были. Подробнее — ниже, в «Обновление сайта».
Исключить страницу — убрать страницу из поиска. Она не удаляется насовсем: в секции «Исключено» её можно «Вернуть в базу». При обновлении сайта исключённые страницы не возвращаются.
Исключить группу — целую ветку сайта по адресу, например всё, что начинается с /blog/ (кнопка «Исключить группу целиком»). Правило действует и на будущие страницы — даже если сканирование ещё идёт, страницы этой ветки дальше не скачиваются. Вернуть — «Включить обратно».
Просканировать заново — одну страницу, если она не проиндексировалась или изменилась.
Переименовать сайт, Удалить сайт — целиком.

Обновление сайта

Пока идёт проход, у сайта метка «ПРОВЕРЯЕМ ИЗМЕНЕНИЯ» и счётчик проверенных страниц. Когда он закончится, под строкой сайта появится итог с фильтрами — «Изменились», «Новые», «Пропали с сайта», «Без изменений»: клик по фильтру оставляет в списке только эти страницы. У изменённых и новых страниц в списке стоят метки ИЗМЕНЕНА и НОВАЯ.

Страницы, которых больше нет на сайте, пропадают из поиска агента. Если страница снова найдётся при следующем обновлении, она вернётся сама; вернуть её сразу можно кнопкой «Вернуть».

Совет. Если на сайте поменялось то, что есть на каждой странице — меню, подвал, телефон в шапке, — изменёнными окажутся почти все страницы. Это нормально: при следующем обновлении снова разберутся только реально изменившиеся.

Ограничения

Сканируются только страницы, которые открываются обычным запросом и содержат текст в HTML. Сайты, которые полностью рисуются скриптами на стороне браузера, могут оказаться «пустыми».
Автоматического обновления по расписанию нет — нажимайте «Обновить», когда на сайте что-то поменялось.
Из соцсетей читаются публичные страницы и группы ВКонтакте и открытые Telegram-каналы; Instagram и Facebook без входа не читаются.