Внедрение ИИ в отделе: одна операция, один человек, один замер

Планёрка в понедельник и что было через месяц

На планёрке объявили: доступ к ИИ оплачен, с этой недели пользуемся, обучение в четверг. Через месяц пользуются двое — те же, что и до объявления. Служба безопасности прислала письмо о запрете после того, как кто-то вставил в переписку список клиентов с телефонами. Ещё несколько человек работают с ИИ с личного телефона и никому не говорят.

У объявления и у запрета общая черта: после них не осталось ни одного факта. Стало ли быстрее — неизвестно, стало ли хуже по качеству — неизвестно. Спорят про отношение к технологии, потому что спорить больше не о чем.

Почему запрет сверху не даёт того, ради чего вводится

Запрет вводят ради снижения риска утечки.

Задачу он не отменяет: отчёт всё равно сдавать сегодня. Сервис доступен с личного телефона, где ваши правила не действуют — нет корпоративного тарифа, нет настроек, нет журнала. Запрет перемещает использование туда, где его не видно: риск прежний, видимость потеряна.

Запрет непроверяем — по готовому тексту нельзя отличить написанное руками от отредактированного с помощью ИИ. Норма, соблюдение которой нельзя установить, действует только на тех, кто и так собирался её соблюдать.

Третий эффект: запрет достаётся тому, кто пришёл спросить разрешения, и не касается того, кто не спрашивал. После нескольких таких случаев вопросы задавать перестают.

Проверяемая форма запрета одна — перечень конкретных сведений, которые не выходят за пределы компании. Он про данные, а не про инструмент: такое правило человек проверяет сам перед отправкой.

Почему «просто попробуйте» затухает

Мягкий вариант: доступ выдан, обучение проведено, никого не принуждают. Дальше тишина — по четырём причинам.

Нет задачи и нет времени. Открыт пустой чат; вопрос «что бы такое спросить» не имеет ответа в одиннадцать утра между двумя срочными делами. Пробовать предлагается поверх текущей нагрузки, и первый же аврал вытесняет эксперимент.

Нет критерия. Ответ получен, выглядит неплохо. Лучше или хуже, чем человек сделал бы сам, установить не с чем: сравнения не было.

Есть цена ошибки на виду у всех. Принести коллегам результат, в котором ИИ что-то выдумал, — заметное событие. Не пробовать — незаметное.

Есть невысказанный вопрос. Если моя работа делается за пять минут, зачем нужен я. Пока ответа не прозвучало вслух, сотруднику выгоден исход «не получилось». Энтузиазм этого не меняет — меняет ответ на вопрос.

Единица внедрения: одна операция, один человек, один замер

Внедряется не ИИ и не инструмент, а изменение в одной операции — и оно либо подтверждается числами, либо откатывается.

Операция выбирается по проверяемым признакам:

1. Повторяется не реже раза в неделю — иначе не наберётся замеров, и разница утонет в разбросе между случаями.
2. На выходе текст, таблица или список, а не решение: решение остаётся за человеком.
3. Есть эталон — несколько прежних результатов, признанных нормальными. Без него «стало лучше» превращается во вкусовщину.
4. Есть шаг проверки: ошибка обнаруживается до того, как результат уйдёт наружу.
5. Не требует охраняемых данных — либо задачу можно поставить описанием, не отправляя сами данные.

Человек выбирается не по энтузиазму: нужен тот, кто делает эту операцию чаще остальных и кому не стыдно записать, что не получилось. Скептик принесёт «не работает» без данных, энтузиаст — «стало лучше» тоже без данных.

С руководителя две вещи: время на пилот выделяется внутри рабочего дня, а не сверх него, и вслух сказано, что произойдёт с высвободившимся временем. Без второго честных замеров не будет — свою занятость защищают раньше, чем начинают считать минуты.

Замер до и после: три числа, которые снимаются руками

Системы учёта не нужно, хватает секундомера и подсчёта.

• Время полного цикла на одну единицу работы — от «взял» до «сдал», включая проверку и правку.
• Число возвратов на доработку от проверяющего.
• Число случаев, когда результат пришлось делать заново.

Правила, без которых замер бесполезен: единица работы в замерах «до» и «после» одинаковая; считается полное время (черновик за две минуты и час правки — это час и две минуты); замер снимается на естественной нагрузке в несколько приёмов, а не в показательный день; в карточке записаны дата, число повторов и кто выполнял.

Почему нельзя обойтись ощущением. В контролируемом эксперименте METR (arXiv:2507.09089) шестнадцать опытных разработчиков выполнили 246 задач в проектах, с которыми давно работают: часть задач с разрешённым ИИ, часть без. До начала участники ожидали сокращения времени на 24%, после завершения оценили сокращение в 20%. Измерение показало обратное — время выросло на 19%. Переносить вывод на письма и таблицы нельзя: там разработчики и высокие требования к качеству кода. Важно другое — оценка разошлась с измерением в противоположную сторону у людей, которые сами делали работу. Ощущение не является замером ни в плюс, ни в минус.

Второе наблюдение — на ком мерить. В исследовании NBER (рабочий документ 31161) по данным 5 179 агентов поддержки доступ к ИИ-помощнику повысил число решённых обращений в час в среднем на 14%, у новичков и менее квалифицированных прирост составил 34%, а у опытных эффект был минимальным. Вывод для пилота: «попробовали на лучшем сотруднике, прироста нет» — факт про одного человека, а не про инструмент. Обратное тоже верно: выигрыш у новичка не доказывает, что то же получат остальные.

Промпт: план замера для вашей операции

Рабочих данных в нём нет — это процедура измерения, а не работа.

Меняйте только описание операции: «сверка актов с накладными», «подборка кандидатов по вакансии», «еженедельный отчёт по отгрузкам».

Регламент снимает страх, а не риск

Сотрудник боится не утечки, а того, что сделает нечто, о чём не знал, и окажется виноватым. Пока этот страх не снят, бездействие — самый безопасный для него выбор.

Регламент на одну страницу отвечает на три вопроса.

Что можно без отдельного разрешения. Список типов задач и типов данных. Пишется первым и подробнее, чем список запретов.

Что нельзя никогда. Короткий закрытый перечень сведений — именно перечень, а не принцип: принцип каждый толкует по-своему в конце тяжёлого дня.

К кому идти в спорном случае и за какой срок будет ответ. Рабочая часть документа: если ответ приходит через неделю, спрашивать перестанут, а работу всё равно сдадут в срок.

Ещё два пункта пишутся прямым текстом. Каким сервисом и на каком тарифе разрешено пользоваться: «ИИ» — не один продукт, условия у них разные. И то, что результат проверяет и подписывает человек: ответственность за содержание не переносится на инструмент. Второй пункт возвращает сотруднику понятную роль — он автор результата, а не оператор инструмента.

Как считать эффект, чтобы разговор был про цифры

Арифметика на синтетическом примере, числа условные.

Операция — подготовка типового коммерческого предложения. Замер до: 40 минут на одно, 60 штук в месяц. Замер после: 25 минут на одно, число возвратов от проверяющего не изменилось. Экономия: 15 минут на предложении, 15 × 60 = 900 минут в месяц, то есть 15 часов.

Дальше три поправки, без которых расчёт не примут.

Первая: мерили полный цикл, включая проверку и правку. Время до черновика дало бы нарисованную экономию.

Вторая: из экономии вычитается стоимость инструмента — подписки за месяц на всех участников.

Третья: пятнадцать часов становятся деньгами только тогда, когда переложены на другую работу. Если освободившееся время ничем не занято, руководитель спросит, чем оно занято теперь, и ответ готовят заранее.

Стоимость часа считается открыто: полные затраты на сотрудника за месяц делятся на число рабочих часов. Смысл расчёта не в величине итога, а в том, что каждое число проверяется без веры вам на слово.

Приносят это одной страницей: операция; что мерили; замер до с датами и числом повторов; замер после; разница; что делаем с высвободившимся временем; стоимость инструмента; вывод — расширять, повторить замер или остановить. Отрицательный результат сообщается так же, как положительный: замер с итогом «не быстрее» закрывает вопрос по этой операции, и это его польза.

Где метод ломается

Ни один из случаев ниже не отменяет метод, но каждый делает конкретный замер недействительным.

Операция слишком редкая. Раз в месяц или в квартал — замеров не наберётся, разница между двумя случаями объясняется чем угодно.

Показатель нельзя снять руками. «Тексты стали лучше» — не показатель; считаемая замена — число правок проверяющего.

Замеряют показательный день. Человек знает, что его измеряют, и работает иначе. Лечится одинаковыми условиями в обоих замерах и несколькими днями подряд.

Операция изменилась между замерами — поменялся шаблон, порядок согласования, состав исходных данных. Сравнение недействительно; поэтому в карточке и пишут дату.

Результат одного человека переносят на отдел. Разброс по людям бывает больше среднего эффекта; второй замер делается на сотруднике с другим уровнем опыта.

Экономия времени уходит в проверку. Если каждую строку сверяют с прежней тщательностью, выигрыш нулевой. Это честный итог пилота, а не повод дожимать.

Пилот воспринимается как подготовка к сокращению. Замеры будут занижены, и методика этого не исправит. Единственный ход — сказать заранее, куда пойдёт высвобожденное время, и не менять позицию по ходу.

Инструмент не согласован со службой безопасности. Замеры, полученные на запрещённом сервисе, использовать нельзя, каким бы хорошим ни был результат.

Что сделать сегодня

Одно действие, без ИИ.

Выпишите операции, которые вы выполняли за последнюю неделю больше одного раза. Отметьте те, где на выходе текст, таблица или список и где есть несколько прежних результатов, признанных нормальными. Выберите из отмеченных ту, что повторяется чаще остальных, и заведите для неё три колонки: дата, минуты на выполнение, число возвратов от проверяющего. Когда в следующий раз будете делать эту работу обычным способом, засеките время и заполните строку.

Это замер «до». Он делается без ИИ, стоит одну строку в таблице, и без него весь дальнейший разговор — про ощущения.