Чат-бот отвечает точно только тогда, когда база знаний содержит ясные и актуальные правила. В этой статье разберём, как подготовить документы для ИИ-агента Aimylogic, проверить его ответы и настроить передачу сложных вопросов сотруднику. Вы получите рабочую схему тестирования для малого бизнеса: от списка фактов и ограничений до проверки диалогов в реальных каналах.
Какие ответы нужно проверить в первую очередь?
Начните с вопросов, которые клиенты задают ежедневно. Для магазина это наличие, стоимость, доставка и обмен. Для студии услуг, расписание, запись, длительность занятия и условия отмены. Для сервисной компании, сроки работ, порядок расчёта и список исходных данных для заявки.
Составьте таблицу из четырёх колонок: «вопрос клиента», «правильный ответ», «источник», «дата проверки». В последней колонке укажите, когда сотрудник в последний раз подтвердил информацию. Такой список помогает отличить ошибку бота от ошибки самой базы знаний.
| Группа вопросов | Что проверить | Какой ответ считать правильным |
|---|---|---|
| Цена | Тариф, единица расчёта, условия скидки | Бот называет цену только при наличии точного правила |
| Сроки | Время обработки заявки или выполнения услуги | Ответ содержит срок и условие, от которого он зависит |
| Ограничения | Когда услуга недоступна | Бот прямо сообщает об ограничении и предлагает следующий шаг |
| Запись | Какие данные нужны для оформления | Бот задаёт только вопросы из утверждённого сценария |
| Сложный случай | Вопрос вне базы знаний | Бот не угадывает ответ и передаёт диалог сотруднику |
Отдельно соберите вопросы с неоднозначными словами. Клиент может спросить «сколько стоит доставка», не указав город, вес или способ получения. В такой ситуации агент должен запросить недостающий параметр, а не выбрать случайный вариант из похожего текста.
Как подготовить базу знаний для Aimylogic?
Разделите материалы по темам, которые повторяются в работе менеджера. Один документ можно посвятить оплате, другой, доставке, третий, возвратам, четвёртый, описанию услуг. Внутри каждой темы используйте короткие заголовки и отдельные ответы. Страница с длинным рекламным текстом плохо подходит для точного поиска нужного факта.
Каждый ответ лучше составлять по простой схеме: условие, действие, исключение. Например: «При заказе от определённой суммы доставка выполняется по выбранному тарифу. Для другого способа получения действует отдельное условие. Если клиент не указал город, бот сначала уточняет его». Конкретные значения владелец бизнеса подставляет из своих утверждённых документов.
Не смешивайте в одном пункте правила, которые относятся к разным ситуациям. Если в базе написано, что услуга доступна «обычно», агенту трудно определить границы этого слова. Замените его на проверяемое условие: день недели, категория клиента, вид услуги или статус заказа.
Для подготовки материалов можно использовать отдельную инструкцию о том, как создать базу знаний для операторов малого бизнеса. Логика похожа: сотрудник и ИИ-агент должны находить один и тот же ответ в одном месте.
Что добавить в каждую карточку ответа?
- точный вопрос клиента или несколько его вариантов;
- короткий ответ без сведений, которых нет в документах;
- условия, при которых ответ меняется;
- ссылку на внутренний источник или название документа;
- действие после ответа: оформить заявку, уточнить параметр или передать разговор сотруднику;
- дату и ответственного за обновление.
Фразы вроде «уточните у менеджера» не должны заменять весь ответ. Если часть информации известна, бот сообщает её и объясняет, что именно проверит сотрудник. Так оператор получает уже подготовленный диалог, а клиенту не приходится повторять вопрос.
Как протестировать чат-бота на выдуманные ответы?
Проверяйте не только точные формулировки из базы. Один и тот же вопрос задайте разговорно, с опечаткой, в сокращённом виде и с лишними деталями. Например, вместо «каков срок выполнения услуги» клиент напишет «а когда будет готово?» или «можно побыстрее?». У ответа должны сохраняться смысл и ограничения.
- Возьмите по пять вопросов из каждой ключевой темы.
- Сформулируйте каждый вопрос в нескольких вариантах.
- Добавьте вопросы, ответа на которые в базе нет.
- Проверьте вопросы с неполными исходными данными.
- Зафиксируйте ответ агента и сравните его с утверждённым текстом.
- Исправьте источник, инструкцию или маршрут передачи оператору.
Для неизвестного вопроса заранее задайте безопасную модель поведения. Агент может сказать, что не нашёл подтверждённой информации, запросить уточнение или передать разговор сотруднику. Выбор зависит от процесса. Например, вопрос о нестандартном заказе лучше отправить менеджеру вместе с историей диалога.
Полезно проверять и отрицательные сценарии. Спросите о несуществующей услуге, попросите назвать цену без условий, объедините два разных тарифа в одном сообщении. Если бот уверенно придумывает детали, ограничьте область его ответов и добавьте правило: при отсутствии точного совпадения не формировать факт самостоятельно.
Перед запуском можно пройти отдельный чек-лист о том, как протестировать ИИ-чат-бота перед запуском. Он помогает не ограничиваться одним удачным диалогом.
Как понять, что база знаний устарела?
Сделайте список событий, после которых материалы нужно пересматривать: изменение цены, графика, условий доставки, состава услуги или текста предложения. Назначьте одного сотрудника, который подтверждает изменения. Бот не узнает об обновлении прайс-листа из разговора менеджера, пока новая версия не попадёт в его источник.
Старые документы лучше убрать из рабочей базы, а не оставлять рядом с новыми. Если агент видит два противоречащих правила, он может выбрать неподходящий фрагмент. Для каждой темы должна существовать одна актуальная версия. Архив храните отдельно от материалов, по которым бот отвечает клиентам.
Раз в неделю или после заметного изменения в работе повторяйте короткую проверку: цены, сроки, ограничения, запись и передача оператору. Результат удобно фиксировать в журнале: дата, вопрос, ответ, ошибка, исправление и повторный тест.
Какие ошибки чаще всего допускают при проверке?
- Загружают в базу весь сайт без удаления старых и противоречивых страниц.
- Проверяют только вопросы из документа и не используют разговорные формулировки.
- Разрешают агенту отвечать на темы, для которых нет подтверждённых данных.
- Не описывают условия, при которых цена или срок меняются.
- Передают диалог оператору без контекста и заставляют клиента повторять сведения.
- Редактируют ответ бота, но не меняют исходный документ, из-за чего ошибка возвращается.
Если в бизнесе много каналов, тестируйте один и тот же вопрос в каждом подключённом чате. Формат сообщения может отличаться, а вместе с ним меняется и путь клиента до оператора. Для сложных обращений заранее настройте передачу диалога без потери контекста; отдельный разбор этой задачи есть в материале как передать диалог от чат-бота оператору без потери контекста.
3 шага, которые можно сделать на этой неделе:
- Соберите 20 реальных вопросов клиентов и отметьте правильные ответы.
- Разделите документы по темам, удалите противоречия и добавьте условия для исключений.
- Проведите тест с неизвестными и неполными вопросами, затем настройте передачу сложных случаев сотруднику.
Для малого бизнеса такая проверка обычно начинается с разбора переписок и документов, а заканчивается настройкой базы знаний и маршрутов в Aimylogic. Если материалов много или ответы зависят от нескольких условий, сначала полезно провести аналитику, затем подключить интеграцию и обучение сотрудников под конкретный процесс.
