Пилот внедрения ИИ в один процесс

Один процесс, один сценарий работы, чёткие вход и выход. Сценарий, это один конкретный путь: пришло вот такое обращение, на выходе должен получиться вот такой результат.

Пример: "обработка входящих обращений", "подготовка ответа по базе знаний", "классификация заявок и маршрутизация".

Если до пилота был разбор процессов, первая неделя идёт короче: сценарий, числа для оценки качества и требования к данным уже описаны в отчёте, и на первой неделе мы их проверяем на фактических данных. Срок пилота остаётся прежним, четыре недели, освободившееся время уходит на недели 2 и 3.

1. Фиксирую задачу и числа, по которым судим о качестве (неделя 1)

   • описываем сценарий: что на входе, что на выходе
   • договариваемся о числах: точность, полнота, время ответа, доля ручных правок
   • собираю набор примеров с правильным ответом, на нём потом меряем качество

2. Собираю прототип решения (неделя 2)

   • минимальная схема решения: где стоит языковая модель, где лежат ваши данные, с какими вашими системами есть связь
   • доступы и подключения: учётные записи, права, ключи к сервисам
   • если ответ нужно собирать по вашим документам: откуда берём документы, как система находит нужный, что она делает, когда подходящего документа нет

3. Ставлю проверки качества и режим ежедневной работы (неделя 3)

   • проверка того, что ответ пришёл в нужном виде: чего система отвечать не должна и в каких случаях обязана передать вопрос человеку
   • журнал обращений: что спросили, что ответила модель, сколько это стоило, и оповещение, когда что-то сломалось
   • контроль расходов: предел трат в месяц, повторное использование уже полученных ответов, дешёвый и дорогой режимы работы

4. Свожу результаты и план вывода в боевую работу (неделя 4)

   • прогон на собранных примерах и замер по тем числам, о которых договорились в первую неделю
   • отчёт: что получилось, где ломается, почему
   • план следующего шага: что доделать, чтобы процесс работал у вас каждый день без моего участия

• Рабочий пилот в пределах сценария, согласованного на первой неделе. За границами этого сценария он не работает, и это оговаривается до старта.
• Отчёт с числами: качество на ваших примерах, стоимость одного обращения и стоимость месяца работы.
• Список ограничений и рисков.
• План вывода в боевую работу и расширения на соседние процессы.
• Исходный код решения и письменная инструкция, как запустить его у себя.

• Первая встреча, 60 минут.
• Созвоны один или два раза в неделю по 30-45 минут.
• Между встречами, в переписке: материалы, доступы, проверка разобранных примеров.

• Примеры с правильным ответом: от 10 до 50 штук, число зависит от процесса. Если разбор процессов делали до пилота, собранные там примеры идут в дело, недостающие добираем на первой неделе.
• Доступы для тестирования на реальных задачах.
• Доступ к моделям и инфраструктуру оплачивает заказчик, отдельно от 350 000 ₽ за работу.

350 000 ₽, 4 недели. Если до пилота вы делали разбор одного процесса за 90 000 ₽, эта сумма засчитывается в пилот, и доплатить остаётся 260 000 ₽. Условие одно: пилот стартует в течение трёх месяцев после сдачи отчёта по разбору. Разбор нескольких подразделений в зачёт не идёт, после него пилотов обычно несколько.

Доступ к моделям и инфраструктуру оплачиваете вы, отдельно от этой суммы. Порядок этих расходов называю на первой неделе, когда станет виден объём обращений к модели.

Напишите в Telegram, какой процесс хотите проверить, и я скажу, укладывается ли он в четыре недели.