Карта доработок ответа ИИ: причины и время возвратов

Отделите возврат от обычной редакторской правки

Сначала определите, какие изменения входят в ожидаемую работу с черновиком. Небольшая стилистическая правка может быть запланирована изначально. Возвратом удобно считать ситуацию, когда результат не проходит обязательное условие: потерян факт, нарушена структура, перепутан статус или требуется заново извлечь сведения из документа.

Фиксируйте также изменения задания после получения ответа. Если заказчик сначала просил краткую сводку, а затем решил добавить развернутые объяснения, это новый объем работы. Его нельзя автоматически приписывать качеству ИИ. Без такого разделения карта будет показывать недовольство результатом, который никто заранее не определил.

Записывайте причину и активное время исправления

Для каждого возврата сохраните номер задания, номер попытки, причину, способ исправления и минуты работы человека. Подготовку нового запроса, перечитывание исходника и проверку повторного ответа учитывайте отдельно. Ожидание генерации отметьте другой строкой, чтобы не смешивать занятость сотрудника со сроком готовности.

В продолжение темы можно открыть Как дать ИИ полезный контекст без информационного шума: там следующий шаг разобран отдельно.

Начните с небольшого списка причин: пропуск, неподтвержденное добавление, неверная связь, неудобный формат, неясное исходное задание. Разрешите несколько причин, но не учитывайте одно и то же время дважды. Если разделить минуты нельзя, назначьте основную причину и сохраните остальные как сопутствующие замечания.

Пример повторной проверки памятки

В условном задании ИИ сократил учебную памятку. Проверяющий потратил 6 минут на восстановление определения, без которого следующий абзац стал непонятным, и 2 минуты на оформление. После повторной генерации еще 4 минуты ушли на проверку связности. Причина содержательного возврата заняла 10 минут активной работы; оформление учитывается отдельно.

Эти числа иллюстрируют способ учета и не являются нормой скорости. Если похожая причина встречается снова, полезно изменить порядок сокращения: заранее перечислить обязательные определения и показывать удаленные смысловые блоки отдельно. Это может сократить повторное чтение, но эффект нужно проверить по следующим заданиям, а не предположить заранее.

Выберите улучшение по накопленной нагрузке

Сводите карту по причинам, а не только по сотрудникам. Редкая трудная ошибка может требовать больше времени, чем несколько частых мелких правок. Посмотрите суммарные минуты, число затронутых заданий и повторяемость после исправления. Затем выберите одну причину и сформулируйте проверяемое изменение входа, инструкции или формата ответа.

Похожий вопрос разобран в материале Как отделить инструкции ИИ от текста документов — он пригодится, если исходные условия отличаются.

Условие приемки улучшения: выбранная причина перестала приводить к прежнему объему повторной работы на сопоставимых заданиях, а обязательные критерии качества сохранены. Небольшая выборка дает лишь предварительный вывод. Сохраняйте неудачные попытки и повторные проверки в учете: их исключение сделает картину удобнее, но лишит карту практического смысла.