Тесты и бенчмарки
Обновлённый индекс Artificial Analysis увеличил разрыв между открытыми и закрытыми ИИ-моделями
Платформа Artificial Analysis, известная своими бенчмарками больших языковых моделей, выпустила обновлённую версию Intelligence Index. По данным The Decoder, изменение методологии привело к заметным перестановкам в рейтинге: китайская модель Kimi K3.1 Pro потеряла сразу пять позиций.
Новый индекс также зафиксировал увеличение разрыва между открытыми и закрытыми моделями. Это означает, что по совокупной оценке «интеллекта» проприетарные системы всё сильнее отрываются от открытых аналогов. Детали обновлённой методики Artificial Analysis пока не раскрывает, но перестановки в топе уже привлекли внимание экспертов.
Источник: the-decoder.com