Юридическая GLM-Legal от Z.ai: 19,2% на Harvey LAB и обгон Claude Fable 5 с Kimi K3

Китайская Z.ai представила GLM-Legal — специализированную модель для юридических задач, построенную на базе GLM-5.3-Flash. Ключевой результат: 19,17% на открытом бенчмарке Harvey LAB со строгой all-pass проверкой — это почти втрое больше, чем у базовой модели (6,67%), а разница составляет 12,5 процентных пункта. Результат независимо воспроизведён, один тест обходится всего в $0,15.

Архитектура: 320B параметров всего, 18B активных в MoE, контекст 1M токенов и выход до 128K. Модель понимает текст, изображения, видео и файлы. Правда, доступ к GLM-Legal ограничен: только через API по заявке, открытых весов нет. Базовая модель может разворачиваться на своих серверах через vLLM или SGLang.

Обучение проходило в два этапа: сначала дообучение на расширенных юридических корпусах, затем reinforcement learning на десятках тысяч юридических задач. При этом агентный контур развивался вместе с моделью — найденные крайние случаи вскрывали узкие места обвязки, а её улучшения открывали модели более реалистичные условия.

На других бенчмарках GLM-Legal даёт 86,23% на LegalBench — примерно на уровне Kimi K3 (86,21%), но чуть ниже Claude Fable 5 (88,56%). При этом на Legal Research Bench от Vals AI модель показала 41,83% — хуже собственной базовой версии (45,19%). В общем рейтинге Vals AI она занимает 7-е место из 79: обходит Claude Fable 5 (11,25%), Kimi K3 (12,92%) и GPT-6 Astra (5,42%), но уступает лидеру Muse Spark 1.2 (25,42%).