«Вроде помогает» — самый частый ответ владельца бизнеса на вопрос, окупился ли AI-агент. Проблема в том, что «вроде» нельзя показать инвестору, сравнить с прошлым месяцем или использовать, чтобы решить — расширять внедрение или сворачивать. Ниже — четыре метрики, которые превращают ощущение в число.
1. Доля диалогов, закрытых без оператора
Формула простая: диалоги, где агент ответил и клиент не эскалировал к человеку, делённые на все диалоги за период. Если у магазина было 400 обращений в чат за неделю и 310 из них агент закрыл сам — это 77,5%. Важно не путать эту метрику с «агент ответил хоть что-то»: диалог, где бот три раза переспросил и клиент в итоге написал «оператора» — это провал, а не закрытый диалог, даже если бот формально что-то сказал.
2. Среднее время до первого ответа — и разница между днём и ночью
Средний оператор поддержки отвечает клиенту за минуты в рабочие часы и за часы — ночью, в выходные, во время обеда. Здесь и находится главная экономия AI-агента: не в том, что он быстрее человека в 15:00 в будни, а в том, что в 2 часа ночи разница — между «ответ через минуту» и «ответ утром, когда клиент уже купил в другом магазине». Если считать среднее время ответа по всем суткам одной цифрой, эта разница прячется. Стоит смотреть отдельно на дневные и ночные часы.
3. Конверсия диалога в заказ
Это метрика, которую владельцы бизнеса недооценивают чаще всего: сколько из диалогов с агентом закончились покупкой, по сравнению с тем, сколько диалогов заканчивались покупкой раньше — с оператором или вообще без ответа. Если раньше ночные обращения в принципе оставались без ответа до утра и терялись, а сейчас часть из них конвертируется в заказ прямо ночью, — это не «дополнительная опция», это прямые деньги, которые раньше магазин просто не видел, потому что не с чем было сравнивать.
4. Стоимость одного закрытого диалога
Здесь считается не абстрактная «стоимость подписки», а стоимость на один диалог: сумма затрат на AI-поддержку за месяц (сама подписка плюс расход токенов, если тариф с оплатой по использованию), делённая на число диалогов, которые агент закрыл без оператора. Если в пересчёте это 15–20 рублей за диалог против нескольких сотен рублей за то же время оператора — сравнение становится конкретным, а не «в целом дешевле».
Что делать с этими цифрами дальше
Смотреть их не разово, а раз в неделю-две в динамике: рост доли диалогов без оператора — сигнал, что база знаний покрывает всё больше реальных вопросов клиентов. Падение конверсии в заказ при стабильном числе диалогов — сигнал, что агент отвечает, но не помогает купить, и стоит смотреть конкретные переписки, а не общий процент. Число без истории — просто число; та же метрика месяц к месяцу — уже управленческое решение.