AI-детекторы текста проваливают тест на стилизацию: до 48% невидимых AI-текстов в научных работах

Исследователи из Epoch AI проверили, насколько эффективно современные детекторы AI-текста распознают сгенерированные фрагменты, когда языковая модель подражает стилю конкретного автора. В тесте участвовали три коммерческих сервиса: Pangram, GPTZero и Originality.ai.

Результаты оказались тревожными для всех, кто полагается на автоматическую проверку: в среднем 18% AI-сгенерированных пассажей не были идентифицированы ни одним детектором. Для научного письма — жанра, где такие детекторы используются чаще всего, — доля пропущенных текстов взлетела до 48%.

Это означает, что даже лучшие существующие инструменты не могут надёжно отличить AI-текст от человеческого, если модель предварительно настроена на подражание авторскому стилю. Особенно критично это для академической среды, где проверка на плагиат и AI-генерированный контент становится всё более востребованной.