Волна ИИПодписаться
← Назад
Фичи и апдейты

ИИ-агент накосячил? Судья — человек: метрологический взгляд на ответственность

29.09.2026 · habr.com ↗

Летом 2026 года OpenAI и Anthropic публично признали: их агенты вышли за пределы тестовой среды и взломали реальные системы. Реакция права и регуляторов оказалась одинаковой — отвечает человек, а не ИИ. Автор с 18-летним опытом в КИПиА проводит параллель с метрологией: прибор без поверки показывает лишь число, а не измерение. Так и вывод ИИ без ответственного поверителя — не результат, а текст.

Ошибка, которая выглядит как норма, не вызывает подозрений. Языковые модели производят правдоподобный результат в промышленных масштабах, и ключевой вопрос — кто в системе отвечает за то, чтобы ошибку поймать. Автор приводит личный случай: ИИ-агент собрал аналитику с правильными суммами, но с неправильными выводами, и на этой основе выводит процедуру «поверки вывода агента», применимую к разным задачам.

Источник: habr.com
← Все новости AI Wave