Четыре шага, и у каждого есть признак провала
Инструменты меняются каждый месяц: сервис переименовывают, лимит режут, доступ закрывают. Порядок работы меняется гораздо медленнее — поэтому учить стоит ему, а сервис подставлять любой доступный.
Ниже четыре шага. У каждого — разбор, инструмент и признак, по которому видно, что шаг пропущен. Признак важнее самого шага: пропущенный шаг обнаруживается не в момент пропуска, а через неделю, когда исправлять дорого.
Отправить безопасно
Решение о том, что уходит в чужой сервис, принимается до открытия чата. Документ относится к классу по самому чувствительному полю в нём, а не по общему впечатлению: номер договора и сумма опознают организацию не хуже названия.
Три круга данных · Как обезличить документ · Обезличить прямо сейчас
Поставить задачу
Запрос из четырёх частей: кто отвечает, на что опираться, что сделать, в каком виде вернуть. Плюс строка, которая запрещает додумывать: «если данных нет — так и скажи». Без неё модель заполнит пробел правдоподобным.
Проверить ответ
Ответ приходит в одинаково уверенном тоне независимо от того, верен он или выдуман. Проверка занимает минуту и состоит из трёх вещей: открыть источник, пересчитать числа самому, найти места, где модель додумала недостающее.
Проверить ответ за минуту · Почему ИИ уверенно ошибается · ИИ и числа
Замерить
Пока эффект не измерен, разговор о пользе ИИ упирается в ощущения — а ощущения у того, кто внедрял, всегда лучше реальности. Секундомер, одна операция, несколько повторов, честная фиксация провалов.
Метод проверяется, а не декларируется
Утверждение «так работает лучше» ничего не стоит, пока его не с чем сравнить. Поэтому те же задачи выполняются здесь дважды — по методу и обычным запросом, — и разница публикуется как есть, включая случаи, когда её нет.