Пилот AI-агента за 14 дней: success, SLA, цена и когда стоп
14-дневный пилот AI-агента имеет смысл только с заранее записанными критериями success, SLA сторон, вилкой «пилот vs production» и стоп-условиями — иначе…
14-дневный пилот AI-агента имеет смысл только с заранее записанными критериями success, SLA сторон, вилкой «пилот vs production» и стоп-условиями — иначе это демо, которое все хвалят и никто не внедряет. Я не продаю «давайте попробуем нейросеть». Я продаю контролируемый эксперимент на одном узком контуре: вход → агент → CRM/ответ → разбор. Если за 14 дней нельзя измерить success — пилот спроектирован плохо, а не «AI не зашёл». 14 дней достаточно, чтобы проверить гипотезу на реальном потоке, а не на придуманных примерах, и получить цифры для решения: масштабировать, переделать или закрыть. Месяц без рамок обычно размывает ответственность: «ещё подкрутим», «подождём данных», «модель обновится» — и проект живёт по инерции, не принося измеримого результата. Ниже — как выглядит пилот, который заканчивается решением, а не презентацией.
Что должно быть записано до старта пилота
Пилот начинается не с выбора модели, а с документа на 2–3 страницы. Если этого документа нет к первому дню — эксперимент не стартует. В нём четыре блока.
1. Критерии success. Одна метрика-владелец и 2–3 поддерживающие. Метрика-владелец отвечает на вопрос «стало ли лучше, чем без агента», а не «работает ли модель». Примеры формулировок, которые проходят:
- доля обращений, закрытых агентом без передачи человеку, — не ниже целевого порога;
- время первого ответа на входящий запрос — снижение относительно текущего baseline;
- доля ответов, прошедших выборочную проверку без правок, — не ниже порога;
- стоимость обработки одного обращения — ниже текущей.
Порог задаётся до старта и не двигается по ходу пилота. Если через неделю хочется «немного снизить планку» — это первый признак, что пилот проваливается, а не что планка была высокой.
2. Baseline. Цифры «как сейчас, без агента» фиксируются на том же потоке за сопоставимый период. Без baseline сравнение невозможно: «стало быстрее» — не метрика, «было 4 часа, стало 40 минут на том же типе заявок» — метрика.
3. SLA сторон. Кто что даёт и к какому сроку. Со стороны заказчика обычно: доступ к CRM или почте, тестовый поток обращений, один человек с правом решать по содержанию (не «согласующий по цепочке»), обратная связь по разбору в течение суток. Со стороны исполнителя: контур, интеграции, разбор, отчёт с цифрами. Если доступы приходят на 5-й день из 14 — это не форс-мажор, а нарушение SLA, и оно фиксируется.
4. Стоп-условия. Заранее перечисленные ситуации, при которых пилот останавливается досрочно, без «давайте ещё недельку». Типовые: доступы не предоставлены к согласованной дате; качество входных данных не позволяет агенту работать (например, заявки приходят свободным текстом без структуры, и её нет); метрика-владелец провалена с большим отрывом на промежуточном срезе; выяснилось, что процесс, который автоматизируется, сам подлежит перестройке.
Вилка «пилот vs production»: что считается результатом
Главная развилка пилота — не «работает / не работает», а «что именно придётся доделать, чтобы вывести в production». Поэтому в отчёте пилота всегда две колонки.
| Пилот (10–14 дней) | Production | |
|---|---|---|
| Контур | Один сценарий, один канал, ограниченный поток | Все каналы и типы обращений сценария |
| Интеграции | Минимально необходимые, часто через промежуточный слой | Промышленные, с обработкой ошибок и повторов |
| Данные | Тестовый или ограниченный реальный поток | Полный поток, история, логирование |
| Контроль качества | Ручная выборка, разбор с заказчиком | Метрики в мониторинге, алерты, регламент эскалации |
| Ответственность за ошибку | Разбор на человеке, агент в режиме подсказки | Регламент: что агент делает сам, что передаёт, что блокирует |
| Стоимость | 60–350 тыс ₽ за один сценарий | От 50 тыс ₽ (агент поддержки), от 200 тыс ₽ (агент продаж), от 500 тыс ₽ (сложный контур) |
Вилка нужна, чтобы заказчик сразу видел: пилот — это дешёвая проверка гипотезы, а не урезанная версия продукта. Разница в стоимости между колонками — это не «наценка», а объём работы, который в пилот сознательно не входит.
Сроки: прототип — 10–14 дней, полный контур — 30–90 дней. Сопровождение после запуска — 15–50 тыс ₽/мес.
Как устроены 14 дней
Пилот раскладывается на четыре отрезка. Отклонение от графика — сигнал, а не повод сдвинуть дедлайн молча.
Дни 1–2. Рамки. Подписан документ с success, baseline, SLA и стоп-условиями. Собран доступ к данным. Согласован один сценарий — не «всё про продажи», а конкретно: «входящий запрос с сайта → квалификация → ответ клиенту и запись в CRM».
Дни 3–7. Сборка контура. Вход, агент, выход в CRM или ответ, логирование. К концу отрезка агент обрабатывает реальные обращения в тестовом режиме — под контролем человека, без отправки клиенту.
Дни 8–12. Прогон на потоке. Агент работает на ограниченном реальном потоке. Ежедневный разбор: что агент сделал верно, где ошибся, почему. Правки — только те, что не меняют критерии success.
Дни 13–14. Замер и отчёт. Считаются метрики против baseline, готовится отчёт с двумя колонками «пилот / production» и рекомендацией: масштабировать, переделать сценарий или закрыть. Решение принимает заказчик, не исполнитель.
Когда пилот надо останавливать
Стоп — это не провал, а сэкономленные деньги. Останавливать имеет смысл в четырёх ситуациях.
- Нет измеримой метрики. Если success нельзя посчитать на данных, которые есть, — сначала чинится учёт, потом запускается агент. Иначе пилот превращается в спор о вкусах.
- Нет baseline. Если «как сейчас» никто не замерял и замерить нельзя, сравнивать не с чем.
- Процесс подлежит перестройке. Автоматизация кривого процесса закрепляет кривой процесс. Сначала регламент, потом агент.
- Данные не годятся. Если в заявках нет структуры, а извлечь её нечем, — агент будет ошибаться на входе, и никакая модель это не исправит.
Отдельно: если по ходу пилота заказчик начинает расширять сценарий («а давайте ещё вот это») — это стоп-сигнал по управлению проектом. Расширение объёма в 14-дневном окне ломает и сроки, и замер.
Что заказчик получает на выходе
Не «работающего бота», а пакет для решения.
- Отчёт с метриками против baseline по каждому критерию success.
- Разбор ошибок агента с классификацией: ошибка данных, ошибка сценария, ошибка модели.
- Оценку объёма работ до production — в деньгах и сроках, по вилке выше.
- Список того, что нужно доделать на стороне заказчика: регламенты, доступы, обучение сотрудников, обработка исключений.
- Рекомендацию: масштабировать, переделать или закрыть.
Если рекомендация «закрыть» — это нормальный результат пилота. Дешевле закрыть гипотезу за 60–350 тыс ₽ и две недели, чем тянуть её месяцами.
Если коротко
- Пилот без записанных success, baseline, SLA и стоп-условий — это демо, а не эксперимент.
- Критерий success — метрика против baseline, а не «нравится / не нравится».
- Вилка «пилот vs production» фиксируется до старта: пилот 60–350 тыс ₽ за сценарий, production — от 50 тыс ₽ (поддержка), от 200 тыс ₽ (продажи), от 500 тыс ₽ (сложный контур).
- Сроки: прототип 10–14 дней, полный контур 30–90 дней, сопровождение 15–50 тыс ₽/мес.
- Стоп-условия прописываются заранее: нет метрики, нет baseline, кривой процесс, непригодные данные.
- Результат пилота — отчёт с цифрами и рекомендацией, а не презентация.
FAQ
Можно ли уложить пилот в 10 дней вместо 14? Да, если доступы и данные готовы к первому дню. Сжимается обычно этап сборки контура, а не прогон на потоке: без нескольких дней реальных обращений замер будет нерепрезентативным.
Что делать, если метрика success провалена, но агент «в целом нравится»? Зафиксировать провал и разобрать причину: данные, сценарий или модель. «Нравится» — не основание для масштабирования; решение о production принимается по цифрам, а не по впечатлению от демо.
Нужен ли пилот, если сценарий простой — например, ответы на типовые вопросы? Нужен, но короткий: проверить долю ответов без правок и стоимость обработки. Простой сценарий быстрее собирается, но и ошибается он на граничных случаях, которые видны только на реальном потоке.
Кто отвечает за ошибки агента во время пилота? На время пилота агент работает в режиме подсказки или под контролем человека — ответственность за отправленный клиенту ответ остаётся на сотруднике. Регламент, при котором агент отвечает сам, — часть production, а не пилота.
Что если по ходу пилота выяснилось, что нужен другой сценарий? Пилот по текущему сценарию доводится до замера и закрывается с отчётом. Новый сценарий — новый пилот: смешивать два сценария в одном 14-дневном окне значит не измерить ни один.
Читайте также
- Пилот AI-агента за 14 дней: как оценить успех, когда останавливаться и сколько это стоит в 2026 году
- Пакет «Handoff & SLA desk» 14 дней: 28/48/76к
- Тесты AI-агента: регрессия, red team и SLA в 2026 году — этапы, цифры и сроки
Обсудить задачу
Расскажите, что нужно автоматизировать. Александр Раисович ответит лично и предложит архитектуру решения.