Как выбрать задачу для ИИ-агента и оценить результат пилота

ИИ-агент, в отличие от чат-бота и обычной нейросети, не только отвечает. Он сам находит клиента в CRM, готовит черновик предложения и записывает переписку в карточку сделки. Чем больше действий вы отдаете программе, тем важнее заранее решить, что она делает сама, а что ждет подтверждения сотрудника.

Первую задачу и пилот проще выбрать, когда заранее определены граница самостоятельности агента, правила безопасности и показатели приемки.

Чем ИИ-агент отличается от чат-бота и обычной нейросети

Агент получает от вас цель и сам выбирает шаги: анализирует данные, обращается к инструментам, строит план и выдает результат. Для этого он запускает код, обращается к API (программному интерфейсу другого сервиса) и работает с файлами.

Обычная нейросеть и чат-бот работают как собеседник: на вопрос дают ответ.

Разницу показывает входящая заявка на корпоративное обучение. Чат-бот вежливо ответит. Агент найдет компанию в CRM, проверит историю контактов и задаст клиенту уточняющие вопросы. Затем подберет программу, рассчитает предварительную стоимость и подготовит черновик предложения. В конце он назначит звонок и запишет всю переписку в карточку сделки.

Какие действия агент делает сам, а какие только с подтверждением и лимитами

Степень самостоятельности агента определяет компания. Удобная граница такая: если действие меняет данные внутри компании и его легко отменить, агент справится сам. Если действие выходит за пределы компании или удаляет данные, нужно подтверждение сотрудника.

Например, агент может сам обновлять записи, а письма и платежи отправлять только после подтверждения сотрудника. Финальные решения в бизнесе лучше оставлять человеку.

Начинайте с частых однообразных задач, результат которых легко проверить:

• сортировка обращений;
• черновики;
• сбор данных;
• отчеты;
• ответы на одни и те же вопросы о стоимости услуг.

Автоматизировать все сразу редко получается хорошо. В одном из рабочих проектов агенту передали шаблонные проверки и анализ сбоев, а сложные и нестандартные ошибки по-прежнему ищут специалисты.

Формулируйте задачу с точкой контроля. Например, агент готовит из входящего письма карточку лида, показывает ее менеджеру и сохраняет только после его подтверждения. Подтверждение ставят перед конкретным рискованным действием, а его параметры и результат сохраняют в журнале.

При подключении к почте и CRM проверьте 3 вещи:

• нет ли ключей и паролей в коде, общих таблицах и открытых папках на сайте; секреты агента храните в отдельном закрытом хранилище;
• задан ли лимит, то есть потолок действий за час: всего, в одну карточку, в одну задачу; упершись в него, агент останавливает запись и сообщает человеку, а стоп снимает тоже человек;
• защищена ли система от дублей: если CRM сохранила карточку, а ответ не дошел, повторный запрос создаст вторую; помогают идентификатор операции, проверка текущего состояния, ограниченное число повторов и передача человеку при неопределенности.

ИТ-решения с искусственным интеллектом в ряде случаев обрабатывают персональные данные клиентов и их контактных лиц. Поэтому доступы агента к CRM продумайте до запуска. Сценарии, интеграции с CRM и контроль качества закладывают при разработке ИИ-агента под ваши процессы.

Как провести пилот ИИ-агента и по каким показателям его принять

Пилот проводят на одной задаче: у нее один ответственный за результат, единые критерии приемки и единый порядок замера. Если пилот раскидан по 5 отделам, каждый меряет свое, и отчет состоит из средних, за которыми ничего не стоит.

Задача подходит, если:

• она повторяется так часто, что за несколько недель накопится материал для сравнения;
• у результата есть владелец, который вправе принять или отклонить работу;
• критерии приемки можно записать заранее;
• текущий процесс измерим;
• ошибку можно поймать до того, как она дойдет до клиента.

Шаги пилота:

1. Пройдите с исполнителем 3 завершенных случая: обычный, сложный и возвращенный. Отметьте, что он читал, где уточнял и когда задача считалась законченной.
2. Оставьте один тип входа, один измеримый результат, одну группу пользователей и только необходимые инструменты.
3. Соберите сценарий на платформе: Make и Albato подходят для простых сценариев с готовыми интеграциями, n8n для гибкой настройки и самостоятельного размещения.
4. До пилота сохраните исходные время, качество и расходы. Правила подсчета запишите в паспорт пилота на первой неделе.
5. Тестируйте на ограниченном наборе реальных задач, включая редкие и сложные. Проверяйте весь путь агента: какие данные он использовал и какие действия выполнил.

Для задач вроде квалификации заявок, ответов по базе знаний и работы с CRM и документами подойдет разработка ИИ-агентов со сценариями, интеграциями, контролем качества и сопровождением.

По описанию в одной из экспертных статей, пилот может идти 7 дней на реальных обращениях клиентов: сначала снимают базовый замер, в конце повторяют его, а разницу заносят в акт сравнения.

Показатели раскладывают на 4 категории: качество, скорость, стоимость и надежность. В поддержке мерилом качества служит доля обращений, закрытых без оператора. Обращение засчитывают закрытым, только если клиент подтвердил ответ. Если он переспросил или пожаловался, обращение не считается.

Стоимость считают как часы людей по вашим ставкам плюс обращения к модели. Лицензию и разовое внедрение сравнивают отдельно на горизонте года.

Итоговая логика условная, пороги вы задаете сами, исходя из своей экономики:

Не меняйте модель, базу и инструкцию одновременно, иначе потеряете причинную связь. Пилот стоит остановить, если полезный результат не определен, данные недоступны, риск не удается ограничить или проверка и переделка съедают пользу.

Агенту доверяют повторяющиеся и откатываемые действия под замером

Первой берите частую задачу с легко проверяемым результатом. Полномочия агента ограничивайте заранее: рискованные действия отдавайте на подтверждение, а доступы и лимиты задавайте до запуска. Принимать пилот лучше по числам, снятым до старта: без базового замера оценить пользу будет нечем.

Какую первую задачу отдать агенту и где поставить подтверждения, можно обсудить с командой QIO.

Источники

• Персональные данные в IT-сфере: правовые аспекты обработки и ответственности операторов \ КонсультантПлюс