AI-пайплайн контента brief→QA→publish: gates и галлюцинации
AI-пайплайн контента в production — это конвейер brief → draft → QA → publish с ролями, quality gates и отдельным контуром ловли галлюцинаций; без ворот…
AI-пайплайн контента в production — это конвейер brief → draft → QA → publish с ролями, quality gates и отдельным контуром ловли галлюцинаций; без ворот «модель пишет → сразу на сайт» вы масштабируете мусор, а не охват. Я собираю такие пайплайны для блогов, GEO/SEO-блоков и ops-рассылок. Ниже — роли, ворота качества, стоимость итерации и практики, которые реально режут выдуманные факты.
| Стадия | Вход | Выход | Кто/что |
|---|---|---|---|
| 0. Demand | тема, intent, KPI | приоритет в backlog | редактор / SEO |
| 1. Brief | тема + источники | структура, тезисы, ограничения | человек + модель |
| 2. Draft | brief | черновик | модель |
| 3. QA | черновик | pass / fail + список правок | модель-критик + человек |
| 4. Publish | pass | публикация + лог | CMS / человек |
Дальше разбираю каждую стадию: что на входе, что на выходе, где ставить ворота и как не дать модели выдумать цифру, которой не существует.
Роли в пайплайне: кто за что отвечает
Ключевая ошибка — свалить весь конвейер на одну модель и одного человека «на всё». В рабочем пайплайне ролей минимум четыре, и у каждой свой выход.
- Редактор / SEO — стадия 0. Отвечает за backlog: какие темы вообще идут в работу, под какой intent, какой KPI (трафик, заявки, охват рассылки). Без этой стадии модель генерирует контент «обо всём», который никому не нужен.
- Человек-постановщик brief — стадия 1. Собирает источники, тезисы, ограничения: что можно утверждать, что нельзя, какие цифры брать только из лида. Это самая дешёвая точка контроля и самая недооценённая.
- Модель-драфтер — стадия 2. Пишет по brief. Её задача — не «придумать», а «уложить тезисы в структуру».
- Модель-критик + человек-приёмщик — стадия 3. Критик проверяет по чек-листу, человек принимает финальное решение. Один человек на приёмке — обязателен, даже если критик автоматический.
Практика: если у вас нет отдельного человека на стадиях 0–1, пайплайн разваливается на качестве, а не на скорости. Модель ускоряет drafting, но не заменяет постановку задачи.
Quality gates: где ставить ворота
Ворота — это точка, где контент либо идёт дальше, либо возвращается на доработку. Без явных ворот «модель пишет → сразу на сайт» вы масштабируете мусор, а не охват. Минимальный набор — три ворот.
Ворота 1: brief → draft. Проверяем, что в brief есть: тема, intent, структура, список источников, ограничения (что нельзя утверждать). Если brief пустой или состоит из одной строки — драфт не запускаем. Это отсекает 80% мусора до того, как он появился (оценка по практике, не измеренная статистика).
Ворота 2: draft → QA. Автоматический чек-лист:
- все цифры и факты есть в brief или в приложенных источниках;
- нет названий клиентов, кейсов и статистики, которых не было во входных данных;
- структура соответствует brief (разделы на месте, объём в рамках);
- нет запрещённых формулировок (если у вас есть стоп-лист).
Ворота 3: QA → publish. Человек-приёмщик читает финальный текст. Проверяет: тон, отсутствие выдуманных фактов, корректность ссылок, соответствие KPI стадии 0. Только после этого — публикация и запись в лог (что опубликовано, когда, по какому brief, кто принял).
Логирование — не бюрократия. Это единственный способ потом понять, на какой стадии проскочила ошибка, и починить именно её.
Контур ловли галлюцинаций
Галлюцинация — это утверждение, которого нет во входных данных. Ловить её «на глаз» в потоке невозможно, поэтому нужен отдельный контур — не часть QA, а параллельная проверка.
Что реально работает:
- Grounding по источникам. Каждый факт в драфте должен иметь якорь — фрагмент brief или источника. Модель-критик проверяет: есть ли якорь у каждого утверждения с цифрой, именем, датой. Нет якоря — fail.
- Явный стоп-лист. В brief прописываем: «не выдумывать названия клиентов, кейсы с именами компаний, статистику, которой не существует». Это не гарантия, но резко снижает частоту.
- Разделение «факт / оценка». Всё спорное помечается как оценка. Модель обязана различать «по данным X» и «по нашей оценке». Если не различает — правка на воротах 2.
- Второй проход критиком. Отдельная модель (или отдельный промпт) с задачей «найди утверждения без источника». Не «улучши текст», а именно «найди необоснованное».
- Выборочная ручная проверка. Даже при автоматическом контуре человек на воротах 3 проверяет 100% публикаций, пока пайплайн не стабилизировался. Дальше можно переходить на выборочную — но не раньше, чем накопится лог с низкой долей fail.
Важно: контур ловли галлюцинаций — это не «модель, которая проверяет модель» в вакууме. Это модель + правила grounding + человек на приёмке. Уберите любой элемент — контур перестаёт работать.
Стоимость итерации и сроки
Стоимость пайплайна складывается из двух частей: сборка контура и его сопровождение. Ориентиры студии:
- пилот одного сценария — 60–350 тыс ₽;
- базовый агент поддержки — от 50 тыс ₽;
- агент продаж — от 200 тыс ₽;
- сложный контур — от 500 тыс ₽;
- сопровождение — 15–50 тыс ₽/мес.
Сроки: прототип — 10–14 дней, полный контур — 30–90 дней.
Что это значит на практике. Пилот одного сценария (например, только блог: brief → draft → QA → publish) — это 10–14 дней до прототипа и 60–350 тыс ₽ в зависимости от числа ворот и глубины контура галлюцинаций. Полный контур на несколько каналов (блог + GEO/SEO-блоки + ops-рассылки) — 30–90 дней и от 500 тыс ₽. Сопровождение 15–50 тыс ₽/мес — это поддержка промптов, чек-листов и логов, а не «дописывание контента за вас».
Стоимость итерации внутри пайплайна — отдельная величина. Одна правка на воротах 1 (brief) дешевле правки на воротах 3 (перед публикацией) в разы: на стадии brief вы меняете тезис, на стадии publish — переписываете готовый текст и заново проходите QA. Поэтому ворота 1 — самые важные.
Чек-лист запуска пайплайна
Перед тем как включать конвейер в production, проверьте:
- [ ] Определены роли на стадиях 0–4, у каждой есть выход.
- [ ] Brief содержит тему, intent, структуру, источники и ограничения.
- [ ] Есть три ворот: brief → draft, draft → QA, QA → publish.
- [ ] Стоп-лист запрещённых утверждений прописан в brief.
- [ ] Контур grounding: каждое утверждение с цифрой имеет якорь в источнике.
- [ ] Разделение «факт / оценка» зафиксировано в правилах.
- [ ] Человек-приёмщик на воротах 3 — обязателен на старте.
- [ ] Логирование публикаций включено с первого дня.
- [ ] Определён KPI стадии 0 и способ его измерения.
Если хотя бы один пункт не закрыт — пайплайн будет масштабировать мусор. Начните с пилота одного сценария, стабилизируйте ворота, и только потом расширяйте на другие каналы.
Если коротко
- AI-пайплайн контента — это конвейер brief → draft → QA → publish с ролями и воротами, а не «модель пишет на сайт».
- Минимум три ворот: brief → draft, draft → QA, QA → publish. Ворота 1 — самые дешёвые и самые важные.
- Контур ловли галлюцинаций — отдельная проверка: grounding по источникам, стоп-лист, разделение «факт / оценка», второй проход критиком, человек на приёмке.
- Ориентиры: пилот сценария 60–350 тыс ₽, сложный контур от 500 тыс ₽, сопровождение 15–50 тыс ₽/мес. Прототип — 10–14 дней, полный контур — 30–90 дней.
- Без человека на воротах 3 на старте пайплайн не стабилизируется.
FAQ
Нужен ли человек в пайплайне, если есть модель-критик? Да, на старте — обязательно. Критик ловит часть галлюцинаций, но не заменяет приёмку. Человек на воротах 3 проверяет тон, корректность ссылок и соответствие KPI. Переход на выборочную проверку возможен только после накопления лога с низкой долей fail.
Сколько ворот минимум? Три: brief → draft, draft → QA, QA → publish. Можно добавить четвёртые ворота внутри QA (например, отдельная проверка цифр), но меньше трёх — это уже «модель пишет → сразу на сайт».
Как понять, что пайплайн масштабирует мусор? По логу: если доля fail на воротах 2 растёт, а на воротах 1 — нет, значит brief слабый. Если fail на воротах 3 высокий при низком fail на воротах 2 — чек-лист QA не покрывает реальные ошибки.
Можно ли запустить пайплайн без отдельного контура галлюцинаций? Можно, но тогда галлюцинации будет ловить человек на воротах 3 — вручную и медленно. Отдельный контур (grounding, стоп-лист, второй проход критиком) снижает нагрузку на приёмку и режет выдуманные факты до того, как они дойдут до человека.
Сколько стоит пилот и за сколько он окупается? Пилот одного сценария — 60–350 тыс ₽, прототип за 10–14 дней. Окупаемость зависит от KPI стадии 0 (трафик, заявки, охват) и от того, сколько ручного drafting вы заменяете. Точную цифру без ваших вводных назвать нельзя — это оценка, а не гарантия.
Читайте также
- Пакет «AI Pre-call Brief desk» 14 дней: 32/54/86к
- Canary и eval-gates для AI-агента: golden-set и rollback за 30 дней
- Метрики и аналитика для контента в нейросетях
Обсудить задачу
Расскажите, что нужно автоматизировать. Александр Раисович ответит лично и предложит архитектуру решения.