«Ну и как, ваш ИИ окупается?» На этот вопрос на планёрке у большинства нет ответа в цифрах, и полезное внедрение тихо сворачивают – не потому что не работало, а потому что не смогло себя доказать.
Чтобы измерить, сколько выручки вернул AI-агент, нужна не вера, а расчёт. Сразу оговорка: агент чаще не приносит «новую» выручку, а возвращает утекавшую – из-за медленных ответов, забытых касаний, необработанных заявок. Значит, измеряем разницу «было / стало» на сопоставимом потоке. Разберём по шагам.
Зачем вообще цифра
Скепсис «а оно работает или это модная игрушка» встречает почти любое внедрение, и без числа ответить нечем. Но цифра нужна не только для обороны. Она управляет решением: заметный возврат – масштабировать, слабый – докручивать, нулевой – честно свернуть. Без измерения вы одинаково слепы и к успеху, и к провалу.
Шаг 1. Зафиксируйте точку отсчёта
До запуска соберите текущие показатели по участку, где будет работать агент: конверсия этапа, скорость ответа, доля обработанных заявок, средний чек. Это база для сравнения.
Пропуск этого шага – самая частая и фатальная ошибка. Не знаете, как было до агента, – не докажете, что он что-то изменил. День на замер «до» экономит месяцы бесплодных споров.
Шаг 2. Выберите метрику эффекта
Метрика должна отражать именно то, что делает агент. Под разные задачи – разные показатели: скорость первого ответа, доля обработанных без задержки, конверсия нужного этапа, а в идеале – выручка. Не берите десяток разом; хватит одной главной, связанной с работой агента, и одной страховочной на качество, чтобы скорость не росла за счёт брака.
Шаг 3. Сравнивайте на части потока
Чтобы отделить эффект агента от сезона и рекламы, запустите его на доле заявок, а часть оставьте по-старому.
Группа A (агент): заявки → агент → менеджер Группа B (контроль): заявки → менеджер как раньше Сравниваем конверсию и выручку A против B
Параллельное сравнение честнее, чем «до и после», потому что внешние факторы действуют на обе группы одинаково. Если поток не делится, сравнивайте сопоставимые периоды и держите в уме прочие изменения.
Шаг 4. Дайте разгон
Первые дни агент и команда притираются: всплывают нетипичные случаи, правятся формулировки. Судить по первым суткам – значит делать выводы из шума. Оценивайте на устойчивом отрезке.
Шаг 5. Посчитайте возврат
Переведите разницу в деньги. Базовая формула опирается на прирост конверсии на том же потоке:
Возвращённая выручка = Лиды × (Конверсия с агентом − Конверсия без) × Средний чек Пример (условно): Лиды: 300/мес · без: 10% · с агентом: 12% · чек: 50 000 ₽ 300 × (0,12 − 0,10) × 50 000 = 300 000 ₽/мес
Те же лиды, выше доля дошедших до сделки, разница и есть возвращённые деньги. Влияет агент ещё и на средний чек или повторные продажи – эти эффекты считаются отдельно и добавляются.
Здесь важно не приписать агенту чужое. Соблазн записать на его счёт весь рост в период запуска велик, но параллельно могли измениться реклама, сезон, цены. Ложная цифра рассыплется при первой проверке. Сравнение на части потока из шага 3 как раз изолирует эффект; если делить не вышло, засчитывайте агенту только то, что логически связано с его работой – скорость, обработку, касания.
Шаг 6. Сопоставьте с затратами
Возврат неполон без стоимости владения: подписка или инфраструктура, поддержка, обращения к модели.
ROI = (Возвращённая выручка − Затраты) / Затраты Пример: (300 000 − 60 000) / 60 000 = 4,0 → окупаемость 400%
Заметный положительный ROI – зелёный свет на масштаб. Около нуля или в минус – сигнал разобраться: не та задача, сырые данные, недонастроенный агент. Это повод докрутить или остановиться, а не тихо работать в убыток.
Не забудьте про косвенный эффект
Часть пользы агента прямыми деньгами не измеряется, но реальна: разгрузка менеджеров, ровное качество, отсутствие провалов ночью и в выходные, меньше ручной отчётности. Всё это стоит зафиксировать хотя бы во времени сотрудников – сколько часов освободилось и на что они пошли.
Правило здесь одно: косвенный эффект дополняет прямой, а не подменяет его. Сначала честный расчёт возвращённой выручки и ROI, и только затем «плюс разгрузили команду». Если начинать с косвенного, потому что прямой посчитать лень или он не впечатляет, это уже самоуспокоение, а не оценка. Порядок должен быть именно таким: деньги, а потом всё остальное.
Когда окупится
Возврат в месяц – ещё не всё. Полезно прикинуть период окупаемости:
Окупаемость (мес) = Затраты на внедрение / Возврат в месяц Пример: 120 000 / 150 000 ≈ 0,8 месяца
С поправкой на разгон: первые недели эффект ниже, поэтому считать стоит от устойчивого периода, а горизонт брать хотя бы в квартал – так видно постоянный эффект, а не случайные всплески, и учитывается, что часть выгоды (оживление старой базы) приходит не сразу.
Сквозной расчёт
Соберём всё в один пример, числа условные:
1. До агента: 300 лидов · 10% · 50 000 ₽ 2. Запуск на половине потока: конверсия A 12%, B 10% 3. Возврат (на весь поток): 300 × (0,12 − 0,10) × 50 000 = 300 000 ₽/мес 4. Затраты: 60 000 ₽/мес → ROI = 4,0 5. Вывод: ROI кратно положительный → масштабировать
Итог здесь – не «стало живее», а решение с обоснованием. Будь затраты 250 000 при том же возврате, ROI составил бы 0,2 – и это повод не радоваться, а разбираться. Расчёт одинаково честно показывает и успех, и стоп-сигнал.
Метрику подбирайте под задачу
Одной универсальной метрики нет, и в этом частая путаница. Показатель должен отражать именно то, что делает агент на конкретном участке, иначе вы измерите не тот эффект и сделаете неверный вывод.
- Агент на входящих – скорость первого ответа и конверсия первого контакта.
- Агент на follow-up – доля дожатых из зависших сделок.
- Реактивация базы – выручка с оживлённых клиентов, которых давно не трогали.
- Подготовка КП – скорость отправки и конверсия из предложения в сделку.
Если поставить в основу не ту метрику, картина исказится. Например, агент на follow-up почти не влияет на скорость первого ответа, и мерить его этим показателем бессмысленно. Сначала определите, через что именно агент возвращает деньги на вашем участке, и только этот показатель кладите в расчёт возврата.
Что делать с цифрой
Расчёт нужен ради решения, и решений тут по сути три:
- возврат заметно выше затрат – масштабировать на весь поток и следующую задачу;
- возврат около затрат – не сворачивать сразу, а искать причину: не та задача, сырые данные, недонастройка, слишком короткий срок наблюдения;
- возврат ниже затрат и не растёт после доработок – честно остановиться, пока не потратили больше.
Вторая ситуация встречается чаще всего и она же самая коварная, потому что здесь легче всего обмануть себя в любую сторону. Чуть натянул цифры вверх – и продолжаешь лить деньги в неработающее. Махнул рукой слишком рано – и свернул то, что вот-вот бы вышло в плюс. Страхует от обеих ошибок только честный замер и разумный горизонт: дайте агенту выйти на устойчивый режим, прежде чем выносить приговор.
И держите в уме, что оценка не разовая. Померили, доработали, померили снова. Возврат растёт по мере того, как дозревают настройки, данные и сценарии, так что измерение повторяют, а не закрывают вопрос после первой цифры.
Главная подмена – активность вместо результата
Легко начать мерить активность: «агент отправил 1000 сообщений», «обработал 500 заявок». В отчёте красиво, о деньгах молчит. Важно не сколько действий сделано, а сколько сделок и выручки они дали.
Что ещё искажает оценку:
- нет точки отсчёта – сравнивать не с чем;
- сравнивают несопоставимое: параллельно поменяли рекламу или сезон;
- забыли про затраты и считают возврат без ROI;
- судят по первым дням, пока идёт притирка.
Особняком стоит соблазн приписать агенту чужие заслуги. В период запуска меняется обычно не он один: подключают новую рекламу, стартует сезон, кто-то из менеджеров подтянулся. Записать весь прирост на агента заманчиво, но такая цифра красива и недоказуема, и первый же дотошный вопрос на планёрке её развалит. Скромная, но защищённая оценка полезнее эффектной: она выдерживает проверку и на неё можно опереться в решении о масштабе. Если нет уверенности, что рост дал именно агент, честнее засчитать ему только то, что прямо связано с его работой, а спорное оставить за скобками.
Не стройте сразу сложную аналитику с десятком показателей. Для первого решения хватает трёх чисел: конверсия до, конверсия после и стоимость владения. Единственное, без чего всё рушится, – замер «до» перед стартом. Он стоит одного дня внимания, а восстановить упущенную точку отсчёта задним числом уже не выйдет. Если из всего сказанного сделать только одно, пусть это будет честный замер исходных цифр до запуска. Всё остальное – метрики, ROI, период окупаемости – надстраивается над этой точкой; без неё даже самая аккуратная формула считает пустоту. Один день на замер сейчас избавляет от месяцев споров о том, работал агент на самом деле или это только казалось. Цифра, добытая честно, весит больше любого количества уверенных слов, сказанных без неё.