Выбирайте операцию, которую можно проверить
Первый проект с ИИ удобнее строить вокруг ограниченной повторяемой операции. Например, подготовить черновик описания товара по утверждённым характеристикам или распределить входящие обращения по заранее заданным темам. Задача «автоматизировать маркетинг» слишком широка: у неё нет одного входа, результата и способа проверки.
Сначала опишите текущую работу. Кто получает исходные данные, что делает с ними, сколько времени тратит и кто принимает результат? Если сотрудники по-разному понимают процесс, автоматизация перенесёт эту неопределённость в новый инструмент.
Сравните несколько кандидатов
- Повторяемость. Операция встречается достаточно часто, чтобы улучшение было заметно.
- Проверяемость. Есть человек, который способен отличить правильный результат от правдоподобной ошибки.
- Доступность данных. Для теста можно подготовить разрешённые к использованию примеры.
- Цена ошибки. Результат можно остановить и исправить до передачи клиенту или выполнения действия.
На старте предпочтительнее черновик, который проверяет сотрудник, чем самостоятельное решение системы с необратимыми последствиями. Не передавайте инструменту доступ ко всем корпоративным данным ради проверки одной небольшой задачи.
Подготовьте набор примеров и критерии
Возьмите разные ситуации: типичную, неполную, противоречивую и такую, которую следует передать человеку. Для каждой опишите приемлемый результат. В описании товара проверяйте соответствие характеристикам, отсутствие выдуманных свойств и соблюдение структуры; в распределении обращений — правильность категории и работу с неопределёнными случаями.
Часть примеров оставьте для итоговой проверки. Если постоянно менять инструкцию только под один и тот же набор, можно получить красивую демонстрацию без устойчивой работы на новых данных.
Считайте время вместе с исправлениями
Сравните ручной процесс и процесс с ИИ на сопоставимых заданиях. Учитывайте подготовку входных данных, проверку ответа, исправления и повторные попытки. Быстро созданный черновик не даёт выигрыша, если его приходится долго переписывать.
Отдельно записывайте ошибки, а не только среднее время. Ошибка в факте и неудачная формулировка требуют разных действий. Заранее определите, какие ошибки делают результат непригодным независимо от скорости.
Примите решение по итогам пилота
У пилота должны быть срок, ответственный и условие остановки. По завершении выберите одно решение: продолжить в том же объёме, изменить процесс, расширить применение или отказаться от сценария. Увеличивайте объём только после проверки качества на новых примерах.
Зафиксируйте рабочую инструкцию и порядок контроля. Полезный итог первого проекта — понятный процесс, в котором известно, где помогает инструмент и за что отвечает человек.
