Как измерить издержки ИИ-агента по правке багов: опыт команды ТестОпс

Искусственный интеллект ускоряет разработку, но с ним приходят и новые проблемы: растут издержки на поддержку кода, особенно на работу с багами. В прошлой статье команда ТестОпс описала, как создавала агента для автоматической правки багов. Теперь выяснилось, что не менее важно — справиться с изменениями в рабочих процессах, которые принёс агент.

Для этого потребовалось научиться измерять издержки работы агента. Оказалось, что это непростая задача. В новой статье авторы делятся, какие инструменты они создали для мониторинга и что ещё планируют сделать, чтобы агент лучше интегрировался в команду.