Тесты и бенчмарки
Claude Opus 5 поставил рекорд в FoodTruck Bench: $75 264 за 30 дней
Claude Opus 5 завершил 30-дневный забег в FoodTruck Bench с итоговым капиталом $75 264. Это на 13,6% выше предыдущего рекорда, установленного GPT-5.5, и на 41,4% больше, чем у GPT-5.6 Sol. ROI модели составил +3 663%, прибыль — $71 876 при расходах на API всего $26,88.
Бенчмарк симулирует управление фудтраком: модели нужно закупать ингредиенты, готовить и продавать еду, оптимизируя меню и цены. Claude Opus 5 использовал уровень рассуждений xhigh и приготовил 8 434 порции. Sol, вопреки ожиданиям, оказался слабее GPT-5.5, что стало неожиданностью для сообщества.
Это первый подробный разбор FoodTruck Bench на русском — ранее все обновления выходили только на сайте проекта и Reddit. Интерактивные графики доступны на официальном сайте бенчмарка.
Источник: habr.com