Пилот показали, эффект на демонстрации признали, а в ежедневную работу система не вышла. Чаще всего причина не в модели: качество не мерили на реальных данных, у системы нет владельца, её не пропустила служба безопасности или не сошлась экономика. Начинаем с диагностики пилота: за две-четыре недели выясняем причину и пишем вывод — дорабатывать, переписывать или остановить. Исходники, доступы и документация остаются у вас.
Диагностика — от 200 000 ₽, 2–3 неделиОстановка пилота — тоже результатМожем взять пилот другого подрядчика
Его показывали на подготовленных примерах, а на потоке реальных обращений и документов он ведёт себя иначе. Спор «виновата модель или данные» не решается, потому что качество ни разу не мерили на общем наборе задач.
Выборку пилота кто-то один раз собрал и вычистил. В эксплуатации данные грязнее, форматы разнообразнее, а темы, которых в пилоте не было, составляют заметную часть потока.
Проект вёл подрядчик или проектный офис. После демонстрации никто не отвечает за правила, очередь исключений и решение о запуске, поэтому бюджет откладывается ещё на квартал.
Нет описания потоков данных, ролей и журналирования. Это отдельный объём работ, который в смету пилота обычно не закладывали.
Стоимость серверов или подписок, поддержки и проверки человеком оказалась сопоставима со стоимостью ручной обработки. Нужно понять, где разница всё же положительна, а где проект стоит остановить.
Остались исходники без описания, ключи на чужих аккаунтах и непонятно, что из этого можно развернуть у себя. Первый шаг — выяснить, что на самом деле есть.
Таблица описывает типовые случаи. Причину в вашем пилоте называем только после разбора: часто их несколько, и лечатся они по-разному.
Заказчику застрявшего пилота уже обещали многое, и ещё одно обещание ничего не меняет. Поэтому первый шаг небольшой, с точной ценой и письменным результатом, которым можно пользоваться без нас: разбор вашего пилота. На выходе диагностики:
Общую картину причин мы разбирали в статье «Почему ИИ-пилоты не доходят до продуктива», а критерии остановки — в материале «Когда останавливать пилот». Если пилот только планируется, критерии успеха и провала стоит записать до запуска.
Цены — по тарифам. Точная цена только у диагностики, дальше вилки: они сужаются по мере уточнения требований. Диагностика вычитается из следующего этапа, остановиться можно после любой ступени.
200 000 ₽ — один-два процесса; 350 000 ₽ — несколько систем и источников данных. Разбор исходников, замер качества, разбор ошибок, оценка эксплуатации, замечания безопасности, письменный вывод.
Каждый этап стоит 300 000 – 700 000 ₽ и принимается отдельно. Типовые этапы: эталонный набор и замер, данные и интеграция, журнал и мониторинг, безопасность и права. Порядок зависит от того, что показала диагностика.
Система работает на реальном потоке под наблюдением: ошибки разбираются, правила и пороги настраиваются, права расширяются только по результатам.
Приёмка по письменным критериям, обучение сотрудников и владельца, передача исходников, настроек, эталонного набора и инструкции по развёртыванию и откату.
От 1 500 000 ₽ этапами по 300 000 – 700 000 ₽. Итоговая вилка называется по итогам диагностики; для пилота с действиями в боевых системах она выше, чем для ассистента по базе знаний.
20 000, 60 000 или 120 000 ₽ в месяц: мониторинг, обращения, разбор инцидентов, плановые доработки. Работы сверх пакета — 5 000 ₽ в час. Круглосуточного дежурства нет. См. также сопровождение ПО.
Решение зависит от того, что осталось на руках. Если дешевле переписать, скажем это сразу и покажем расчёт.
Разговариваем с теми, кто пилот собирал, и теми, кто должен им пользоваться. Поднимаем систему, смотрим исходники, потоки данных, права и журналы. Пишем вывод и вилку бюджета.
Собираем из реальных данных набор задач с ожидаемыми ответами и письменными правилами оценки. Он остаётся у вас, и по нему мерим любое изменение. Пока нет мерила, правки остаются вопросом вкуса.
Чиним по корзинам: данные и загрузка, правила и промпты, модель, интеграция, безопасность, мониторинг. У каждого этапа своя цена, своя приёмка и право остановиться.
Система работает на реальном потоке под наблюдением. Дежурный по регламенту обновляет промпт и откатывается на предыдущую версию; мониторинг показывает деградацию на заранее испорченном контрольном прогоне.
Приёмка по числам из протокола замера, а не по формулировке «система работает». Обучаем владельца и сотрудников, передаём исходники, настройки, эталонный набор и инструкции.
Либо ежемесячное сопровождение, либо передача на вашу команду. Если по критериям проект нужно остановить, это записывается в акт с причинами.
Остановленный вовремя пилот — нормальный результат честной проверки. Критерии согласуем до доработки, а не после неё.
Метрика успеха, срок решения, владелец и критерий провала, которые нужно записать до запуска.
Типичные причины: данные, владелец, интеграция, безопасность и экономика.
Условный разбор типовой ситуации: как строится мерило качества и на что опирается приёмка.
Что нужно вокруг модели, чтобы она жила в эксплуатации: версии, замер, мониторинг, откат.
Короткий созвон: что за пилот, кто его делал, что есть на руках (исходники, данные, документация) и почему он остановился. Скажем, с какой ступени начинать и в какую вилку это укладывается.
Диагностика — 200 000 ₽ за один-два процесса или 350 000 ₽ за несколько систем. Доработка идёт этапами по 300 000–700 000 ₽, весь вывод в продуктив — от 1 500 000 ₽ и от трёх месяцев, сопровождение — от 20 000 ₽ в месяц. Итоговую вилку называем по результатам диагностики, диагностика вычитается из следующего этапа.
Да, если есть исходники или их можно восстановить. Сначала разбираем состояние, потом называем цену: брать в работу то, чего не видели, нельзя. Если исходников нет и восстановить нечего, скажем, что дешевле собрать заново, а требования и эталонный набор перенесём в новую сборку.
Письменный документ: что в пилоте работает, где и почему ломается, замер качества на эталонном наборе, разбор ошибок по корзинам, оценка стоимости эксплуатации, замечания по безопасности и вывод с вилкой бюджета. Документ написан так, чтобы им можно было пользоваться без нас.
Две-три недели для одного-двух процессов, три-четыре недели, когда затронуто несколько систем. Срок зависит от того, как быстро будут выданы доступы и данные.
Это тоже результат. На руках будет письменный документ: что показал пилот, чего не хватило и при каких условиях к задаче имеет смысл вернуться. Диагностика вычитается из следующего этапа только если вы продолжаете, а документ остаётся у вас в любом случае.
По письменным критериям, согласованным до доработки: качество на отложенном наборе, поведение на сомнительных входах, ежедневная загрузка без ручных шагов, мониторинг, откат на предыдущую версию, названный владелец на вашей стороне. Формулировка «работает» критерием не считается.
Иногда причина в данных, правилах или процессе, а не в модели. Выясняем это разбором ошибок по корзинам до того, как предлагать решение. Результат заранее не обещаем: сначала замер на ваших данных.
Владелец на вашей стороне: он решает, какие правила действуют и когда расширять права. Мы можем взять сопровождение с названными часами и временем реакции. Круглосуточного дежурства у нас нет, и мы говорим об этом заранее.
Да. Часто так и делают: сужают объём до процесса, где разница с ручной работой положительна, и выводят в продуктив его. Остальное остаётся на паузе до результатов.
Мы в Ростове-на-Дону, работаем с заказчиками по всей России: удалённо и в вашем контуре. Доступ к системам и обследование согласуем на старте с вашей службой безопасности.
