Метрики AI-чат-бота: что считать
AI-бот запущен. Как понять, что он работает? Без метрик легко обмануться: кажется, что диалогов много, а заявок нет. Или наоборот: бот молчит, но конверсия высоккая. Чтобы принимать решения, нужны данные.
Метрики бота отличаются от метрик обычного сайта или рассылки. Здесь важно не только «сколько пришло», но и «что бот сделал с клиентом»: ответил, квалифицировал, передал менеджеру или потерял.
В этой статье — какие метрики важны для AI-чат-бота в Битрикс24, как их собирать и интерпретировать. Если нужна разработка AI-бота с аналитикой — поможем.
Содержание статьи
Зачем измерять
Метрики нужны не для отчёта. Они отвечают на вопросы:
- Бот помогает или мешает — клиенты уходят из-за него или наоборот?
- Где проблема — на каком шаге бот теряет клиентов?
- Что улучшить — сценарий, базу знаний, передачу менеджеру?
- Стоит ли масштабировать — если эффект есть, можно расширять.
Метрики должны быть простыми. Не нужно считать всё — достаточно 5–7 показателей, которые влияют на решения.
Конверсия
Конверсия — главная метрика. Она показывает, сколько диалогов привели к целевому действию: заявке, записи, покупке.
Конверсия = (Количество целевых действий / Количество диалогов) × 100%
Что считать целевым действием
- Оставлен контакт — телефон или email;
- Создана сделка — в CRM;
- Записан на услугу — выбрано время;
- Оформлен заказ — если бот принимает заказы.
Что влияет на конверсию
- Сценарий — насколько естественно бот ведёт диалог;
- Скорость — как быстро отвечает;
- Квалификация — не отпугивает ли вопросами;
- Передача — вовремя ли подключается менеджер.
Конверсия зависит от канала. В Telegram она может быть выше, чем на сайте, потому что клиент уже в мессенджере. Сравнивайте показатели по каналам отдельно.
Длина диалога
Длина диалога — среднее количество сообщений от клиента до завершения. Она показывает, насколько бот вовлекает и не утомляет.
Что считать нормой
Нет универсальной цифры. Всё зависит от цели:
- Сбор контакта — 3–5 сообщений;
- Квалификация — 5–8 сообщений;
- Запись на услугу — 4–6 сообщений;
- Поддержка — 2–4 сообщения (вопрос-ответ).
О чём говорит отклонение
- Слишком коротко — бот не выявляет потребность, клиент уходит;
- Слишком длинно — бот задаёт лишние вопросы, клиент устаёт.
Смотрите не только среднее, но и распределение: сколько диалогов оборвалось на первом сообщении, на втором, на третьем. Это покажет узкие места.
Доля передач
Доля передач — процент диалогов, которые бот передал менеджеру. Это важная метрика баланса.
Что означает
- Слишком низкая — бот пытается решить всё сам, но не может. Клиенты уходят необработанными;
- Слишком высокая — бот передаёт менеджеру всё подряд, не выполняя свою работу. Нагрузка на людей не снижается.
Что считать нормой
Зависит от задачи. Если бот — первая линия поддержки, доля передач может быть 20–30% (сложные случаи). Если бот — квалификатор перед продажей, доля передач должна быть высокой (60–80%), потому что его цель — собрать данные и отдать горячего лида.
Смотрите не только на процент, но и на качество передач: менеджер получает контекст или начинает с нуля?
Качество ответов
Качество ответов — субъективная, но важная метрика. Бот может отвечать быстро, но неправильно. Это хуже, чем молчание.
Как измерять
- Выборочная проверка — вручную читать 10–20 диалогов в неделю;
- Оценка клиента — кнопки «Полезно / Не полезно» после ответа;
- Анализ fallback — сколько раз бот не нашёл ответ;
- Жалобы — если клиенты жалуются на бота.
Что делать с плохими ответами
- Дополнить базу знаний — если вопрос был, а ответа нет;
- Исправить сценарий — если бот ушёл не туда;
- Ограничить — если бот отвечает на темы, в которых не разбирается.
Качество важнее скорости. Лучше бот ответит через 5 секунд правильно, чем через 1 секунду — наугад.
Экономия времени
Экономия времени — метрика, которую сложно посчитать, но она важна для обоснования инвестиций.
Что считать
- Сколько диалогов бот закрыл без менеджера — умножьте на среднее время обработки одним менеджером;
- Сколько времени менеджеры тратят на диалоги с ботом — если передача некачественная, время растёт;
- Сколько времени экономит руководитель — если раньше собирал отчёты вручную.
Пример: если бот обработал 100 диалогов, которые раньше требовали 5 минут менеджера каждый, экономия — 500 минут, или 8 часов.
ROI
ROI (Return on Investment) — окупаемость. Считается как отношение прибыли к затратам.
ROI = (Доход от бота — Затраты на бота) / Затраты на бота × 100%
Что включать в затраты
- Разработка и настройка;
- Стоимость AI-модели (токены);
- Хостинг и инфраструктура;
- Поддержка и доработки;
- Время сотрудников на обучение.
Что включать в доход
- Заявки, которые бот собрал и которые закрылись в продажу;
- Экономия на менеджерах (если бот заменил часть работы);
- Дополнительные продажи (если бот дожимает клиентов).
ROI может быть отрицательным в первые месяцы, пока бот обучается и сценарии дорабатываются. Важно смотреть динамику.
Наши рекомендации
Что вы получаете, заказывая настройку метрик у нас
- Метрики — под ваши цели
- Способы сбора — как и где считать
- Дашборд — визуализация
- Обучение — как читать данные
- Рекомендации — что улучшить
- Поддержку — помощь после запуска
📌 Итоговый вывод
AI-бот — это инвестиция, и её нужно измерять.
Что нужно знать:
- Конверсия: сколько диалогов привели к заявке;
- Длина диалога: не слишком коротко, не слишком длинно;
- Доля передач: баланс между самостоятельностью и эскалацией;
- Качество ответов: выборочная проверка, оценка клиентов, fallback;
- Экономия времени: сколько часов освободили;
- ROI: окупаемость, смотреть в динамике.
Также рекомендуем: AI-чат-боты, с чего начать, сценарии, все статьи об AI-ботах.