Qwen4 против текущей 27B: три прогона бенчмарков и ошибка в документации — стоит ли переходить на Flash-Next

Появились первые практические результаты сравнения новой архитектуры Qwen4 с текущей рабочей моделью 27B. Автор провёл три прогона бенчмарков на одном конфиге, чтобы нивелировать случайные выбросы, — и обнаружил неожиданный нюанс: собственная документация модели содержит ошибочную рекомендацию по использованию NVFP4A16. Эта ошибка могла исказить результаты тестов у тех, кто слепо следовал инструкции.

Главный практический вопрос — оправдан ли переход с проверенной Qwen 3.8-27B на Qwen3.8-Flash-Next. Предварительные данные показывают, что новая архитектура может давать прирост в скорости или качестве, но только при условии корректной настройки точности вычислений. Разработчикам рекомендуется перепроверить документацию и прогнать собственные бенчмарки, не полагаясь на стандартные конфиги.

История с ошибочной рекомендацией лишний раз напоминает, что даже документация от производителя может содержать баги. Лучший способ принять решение о смене модели — самостоятельно провести серию замеров на своих задачах и не доверять единичным прогонам.