Как мерить успех ИИ-агента в отделе продаж: 8 KPI

Отдел продаж внедрил ИИ-агента — чат-бота на LLM, который квалифицирует лиды, отвечает в переписке и бронирует встречи. Через месяц руководитель показывает совету директоров график: агент обработал 4 000 диалогов. Совет спрашивает: продажи выросли? И тут выясняется, что этого никто не считал. Число диалогов — метрика тщеславия. Она красиво выглядит и ничего не говорит о том, окупился ли агент.

Проблема массовая. По логике внедрения ИИ-агента в продажи вы платите за инструмент, который должен либо увеличить выручку, либо высвободить время менеджеров. Всё остальное — промежуточные показатели, которые важны только если они ведут к этим двум результатам. Ниже — набор KPI, разбитый по слоям, чтобы вы видели не только «работает ли модель», но и «приносит ли она деньги».

Три слоя метрик

Ошибка — смешивать в одном дашборде технические показатели и бизнес-результат. Они отвечают на разные вопросы и адресованы разным людям.

• Технический слой — работает ли агент как задумано. Смотрит команда, которая его настраивает.
• Операционный слой — меняет ли агент процесс продаж. Смотрит руководитель отдела.
• Бизнес-слой — влияет ли агент на выручку и затраты. Смотрит собственник или финансовый директор.

Если у вас есть цифры только по первому слою, вы знаете, что модель отвечает вежливо и быстро, но не знаете, зарабатывает ли она.

Технический слой: агент вообще справляется?

Здесь измеряется качество работы самой модели до того, как речь зайдёт о деньгах. Основные показатели:

• Доля корректных ответов — процент реплик, где агент дал верную информацию по продукту, цене, срокам. Меряется ручной разметкой выборки диалогов, автоматически это надёжно не считается.
• Частота галлюцинаций¹ — сколько раз агент выдумал факт: несуществующую скидку, ложный срок доставки, обещание, которого компания не давала. Даже 2 процента здесь опасны: одно ложное обещание клиенту стоит дороже сотни правильных ответов.
• Доля эскалаций — как часто агент передаёт диалог живому менеджеру. Слишком высокая означает, что он не тянет; слишком низкая — что он берётся за то, чего не понимает.
• Время ответа — задержка первой реплики. Для входящих лидов скорость критична: чем дольше клиент ждёт, тем ниже конверсия.

Один агент, который честно эскалирует сложный вопрос менеджеру, полезнее десяти, которые уверенно врут клиенту, лишь бы не признавать, что не знают ответа.

Операционный слой: процесс изменился?

Тут проверяется, стал ли отдел работать иначе. Ключевые KPI:

• Скорость первого контакта с лидом — сколько проходит от заявки до первого ответа. Агент должен сократить её до минут или секунд.
• Доля обработанных лидов — какой процент входящих заявок вообще получил ответ. Частая причина потерь до внедрения — лиды, до которых менеджеры не дошли в выходные или в пик.
• Конверсия из лида в квалифицированный лид — насколько точно агент отсеивает нецелевые обращения и передаёт менеджеру только тех, кто готов покупать.
• Время менеджера, высвобожденное агентом — сколько часов рутины (первичный опрос, ответы на типовые вопросы) сняли с людей. Это переводится в деньги через стоимость часа менеджера.

Бизнес-слой: агент окупился?

Финальный вопрос, ради которого всё затевалось. Здесь всего два-три показателя, но именно они решают судьбу проекта.

• Конверсия из лида в сделку по потоку, который вёл агент, — в сравнении с потоком без агента. Только сравнение с контрольной группой отделяет эффект агента от общих колебаний рынка.
• Выручка на обработанный лид — сумма закрытых сделок, делённая на число лидов, прошедших через агента.
• ROI внедрения — прирост выручки и сэкономленное время минус стоимость подписки, интеграции и поддержки. Если считать честно, сюда входят и часы разработчиков на настройку.

Почему нужна контрольная группа

Без A/B-разделения потока вы не отличите заслугу агента от сезонного роста спроса или новой рекламной кампании. Разделите входящие лиды: часть ведёт агент, часть — менеджеры по-старому. Через месяц-два сравните конверсию и средний чек. Это единственный способ доказать эффект цифрами, а не ощущениями.

Сравнение: что измерять, а что нет

Кому это пригодится и кому нет

Пригодится:

• Отделам с большим потоком входящих лидов, где менеджеры физически не успевают ответить всем в первый час — агент закрывает провал по скорости контакта.
• Бизнесу с длинным циклом сделки и типовой квалификацией: агент отсеивает нецелевых и передаёт менеджеру только горячих.
• Компаниям, которые готовы честно вести контрольную группу и считать ROI, а не любоваться дашбордом.

Не пригодится или преждевременно:

• Отделам с десятком лидов в месяц: настройка и поддержка съедят больше, чем сэкономят. Считать статистику не на чем.
• Сложным B2B-продажам, где решение принимает комитет, а каждая сделка требует индивидуального разбора — агент справится в лучшем случае с первым касанием.
• Командам, где нет данных для обучения и промптинга: если у вас нет описаний продукта, прайса и типовых сценариев, агент будет галлюцинировать на пустом месте.

С чего начать замеры

1. Зафиксируйте базовые цифры до внедрения: конверсия, скорость контакта, доля обработанных лидов за последний квартал.
2. Разделите поток лидов на группу агента и контрольную.
3. Первые две недели меряйте технический слой: корректность и галлюцинации на ручной выборке диалогов.
4. Через месяц сравните операционные показатели двух групп.
5. Через два-три месяца, когда накопится статистика по закрытым сделкам, посчитайте конверсию, выручку на лид и ROI.

¹ Галлюцинация — сгенерированное языковой моделью утверждение, которое звучит уверенно, но не соответствует действительности или не подтверждается данными, на которых модель работает. В продажах это ложные обещания клиенту, и они опаснее молчания.