Тесты и бенчмарки
Vals AI при поддержке a16z метит в золотой стандарт AI-бенчмаркинга
Vals AI объявил о планах стать золотым стандартом в области бенчмаркинга искусственного интеллекта. Компания, поддерживаемая фондом Andreessen Horowitz (a16z), хочет сделать тестирование моделей более объективным и заслуживающим доверия.
В условиях, когда рынок наводнён десятками новых ИИ-моделей, а разработчики часто публикуют собственные завышенные результаты, Vals AI видит нишу в независимой оценке. Стартап намерен предоставлять нейтральные бенчмарки, которым можно верить.
Пока не раскрыты конкретные методологии или первые результаты, но амбиции серьёзные: стать эталоном для всей индустрии, как когда-то ImageNet или GLUE.
Источник: techcrunch.com