Пакет «AI shadow → prod» 45 / 75 / 110к за 14 дней
Пакет «AI shadow → prod» — это 14 дней с фикс-ценой 45 / 75 / 110к: агент сначала пишет ответы в тени (клиент их не видит), мы сравниваем scorecard с менеджером, принимаем go/no-go и только потом делаем cutover по чеклисту. Это не «пилот с размытым success» и не retainer «почасово поживём».
Я продаю и собираю этот пакет, когда клиент уже понял задачу, но боится включить AI в лицо клиентам. Shadow снимает страх; scorecard снимает спор «кажется, нормально»; cutover снимает хаос в день X.
Что входит в 14 дней: shadow без клиента
Shadow-режим: AI получает тот же вход, что и менеджер (или копию треда), генерирует ответ в CRM/служебный канал, клиент видит только человека.
| Дни | Фокус | Артефакт |
|---|---|---|
| 0–1 | scope, каналы, доступы, policy «что нельзя» | one-pager + RACI |
| 2–4 | контур shadow: ingest → draft → лог | рабочий draft в 1 канале |
| 5–9 | набор пар «менеджер vs AI», разметка scorecard | ≥ N диалогов с оценкой |
| 10–11 | go/no-go по цифрам | протокол решения |
| 12–14 | cutover или stop + отчёт | prod / rollback plan |
Обязательные правила shadow:
- AI не шлёт наружу (технический hard-block, не «договорённость»).
- Каждый draft связан с
ticket_id/deal_idи версией промпта. - Менеджер может one-click «взять / править / отклонить» — это данные для scorecard.
- Запрещённые темы (юр., деньги вне прайса, персональные споры) — сразу mark
ESCALATE.
Лестница 45 / 75 / 110к: scope in / out
Цены — фикс за 14 дней. Разница не в «больше часов магии», а в ширине контура и глубине cutover.
| 45к — Shadow Core | 75к — Shadow + Scorecard | 110к — Shadow → Cutover | |
|---|---|---|---|
| Каналы | 1 (TG или почта или виджет) | 1–2 | 2 + согласованный handoff |
| Shadow draft | да | да | да |
| Scorecard vs менеджер | базовый (accuracy/tone/policy) | полный + выборка калибровки | полный + gate go/no-go |
| Интеграция CRM | read-only / минимальная запись лога | поля + статус draft | write path + задачи handoff |
| Cutover в prod | нет (отчёт + рекомендация) | soft (canary 10–20% опция по готовности) | да, по чеклисту |
| Обучение команды | 1 сессия | 2 сессии | 2 + runbook on-call 7 дней |
| Out of scope | новые каналы, обучение модели с нуля, редизайн всей KB | то же + кастом UI | то же; крупные доработки KB — апселл |
Что всегда out на всех пакетах (чтобы не размыть 14 дней):
- «перепишите нам весь сайт / всю базу знаний»;
- интеграционный спринт всех систем сразу;
- SLA 24/7 support после дня 14 без отдельного retainer;
- гарантия конверсии продаж (гарантируем процесс и метрики shadow, не выручку).
Done-критерии по пакетам:
| Пакет | Done |
|---|---|
| 45к | shadow жив ≥ 5 раб. дней, ≥ 30 draft’ов, отчёт risk/next |
| 75к | + scorecard на согласованной выборке, протокол go/no-go |
| 110к | + cutover canary/full по чеклисту или документированный stop с причиной |
Scorecard AI vs менеджер и go/no-go
Без scorecard «shadow» превращается в папку черновиков. Я сравниваю пары на одной и той же входящей.
| Критерий | Вес (пример) | 0–2 балла |
|---|---|---|
| Фактическая точность | 30% | ошибка факта = 0 |
| Policy / tone of voice | 20% | грубость, запрет темы |
| Полнота next step | 20% | есть действие и срок |
| Краткость / структура | 15% | вода, простыня |
| Безопасность (PII, обещания) | 15% | любой fail = veto |
Правила разметки:
- Слепая или полуслепая оценка (не «наш AI красивый»).
- Минимум 2 разметчика на спорных; расхождение → third pass.
- Veto-критерии (юр. ошибка, ложная цена) бьют go независимо от среднего балла.
| Решение | Условие (пример) | Что дальше |
|---|---|---|
| Go | mean ≥ порога, veto < 2%, p95 latency ok | cutover / canary |
| Go with limits | ок на FAQ, слабо на complaint | prod только whitelist intent |
| No-go | veto / accuracy ниже пола | stop или ещё 7 дней shadow (отдельный scope) |
Это не замена пилота «success/SLA/stop/цена» в общем виде: здесь ось — именно сравнение с человеком в тени и бинарный gate перед лицом клиента.
Cutover-чеклист: день перевода в prod
Cutover без чеклиста = самый дорогой день проекта. Я не включаю «всем» одной кнопкой.
За 48 часов до
- feature flag shadow/prod, rollback < 5 мин
- cap cost/dialog и rate limit на канале
- handoff human: очередь, SLA, шаблон
- мониторинг: error rate, empty reply, tool fail
- кто on-call в день X (имя, не «команда»)
В момент canary (10–20%)
- только whitelist intent / только рабочие часы — как договорились
- лог каждого исходящего + возможность kill-switch
- сверка scorecard canary vs shadow baseline за 24–48 ч
Перед 100%
- нет критичных инцидентов 48 ч
- human_takeover_rate в коридоре
- клиентский owner подписал go (письменно в чате/CRM)
Rollback
- один флаг → снова только человек
- AI снова в shadow, не «выключен насовсем без логов»
- postmortem 24 ч, список правок
Часто задаваемые вопросы
Чем shadow лучше сразу пилота на клиентах?
Дешевле ошибаться. Вы видите, где AI врёт или тянет воду, до репутационного удара. Для МСП это часто разница между «внедрили» и «запретили AI в компании».
Почему 14 дней, а не месяц?
За две недели хватает набрать выборку и принять go/no-go. Месяц без gate размывает ответственность. Если данных мало — расширяем scope отдельно, не прячем в «ещё подождём».
Можно ли купить только cutover без shadow?
Можно, но я редко советую: cutover без scorecard — спор на ощущениях. Минимум — 75к-логика: цифры до лица клиента.
Что после 14 дней?
Либо prod + лёгкий retainer на сопровождение, либо stop с отчётом, либо апселл: второй канал, KB, tool-calling deeper. В пакет 14 дней «вечная поддержка» не входит.
Читайте также
- Пилот AI-агента 14 дней: success, SLA, stop и цена
- Пакет AI-оператор на смену 40 / 65 / 95: KPI и HITL за 14 дней
- Интеграционный спринт 10 дней: пакеты 35 / 60 / 90к
Нужен пакет shadow → scorecard → cutover под ваш канал — напишите на https://raisovich.ru
Чем пакеты 45, 75 и 110к отличаются по сути?
45к — shadow и отчёт; 75к — полный scorecard и go/no-go; 110к — cutover в prod по чеклисту с canary и rollback.
Что обязательно в scorecard AI против менеджера?
Точность фактов, policy/tone, next step, краткость и safety: veto (ложная цена, юр. ошибка) бьёт go даже при высоком среднем балле.
Что должно быть готово в день cutover?
Feature flag и rollback < 5 мин, cap и rate limit, handoff human, мониторинг ошибок и named on-call — без этого canary не включаю.
Подпишитесь на @raisovich_news
Первыми получайте новые статьи об AI-автоматизации, нейросетях для бизнеса и создании сайтов. Без спама — только полезный контент.
Часто задаваемые вопросы
Чем пакеты 45, 75 и 110к отличаются по сути?
45к — shadow и отчёт; 75к — полный scorecard и go/no-go; 110к — cutover в prod по чеклисту с canary и rollback.
Что обязательно в scorecard AI против менеджера?
Точность фактов, policy/tone, next step, краткость и safety: veto (ложная цена, юр. ошибка) бьёт go даже при высоком среднем балле.