Z.ai GLM-Legal надминава Claude Fable 5 и Kimi K3 в Harvey LAB
Z.ai току-що представи GLM-Legal. GLM-Legal е правен AI модел от Z.ai, изграден върху GLM-5.3-Flash и обучен за агентна правна работа. Той е предназначен за преглед на договори, анализ на доказателства и проучвания за съответствие. Ключовият резултат е 19,2% процент на пълно преминаване на Harvey’s Legal Agent Benchmark (LAB). Това е почти 3 пъти повече от 6,7% на базовия му модел. За разработчиците уловката е достъпът: засега API-то е достъпно само чрез кандидатстване.
Накратко
- Размер: Изграден върху GLM-5.3-Flash — MoE модел с общо 320B и 18B активни параметри, контекст от 1M токена и максимален изход от 128K токена. Z.ai не посочва отделен брой параметри за GLM-Legal.
- Работи на: Само на хоствания API на Z.ai, чрез кандидатстване. Няма публично достъпни тегла. Базовият модел може да се хоства самостоятелно на многопроцесорни сървъри чрез vLLM или SGLang, с FP8 тегла.
- Производителност: В топ 10 на Harvey LAB при малка част от цената на водещите модели. На 2,3 пункта от лидера в LegalBench.
- Най-добър резултат: 19,17% процент на преминатите задачи в Harvey LAB, №7 от 79 във Vals AI, при цена $0,15 на тест.
- Най-слаб резултат: 41,83% в Legal Research Bench на Vals AI, под резултата на собствения му базов модел (45,19%).
- Извод:
- Най-доброто: резултати на ниво водещите правни агенти при около 1/128 от цената на Claude Fable 5.
- Най-лошото: затворена бета версия без посочена цена, без тегла и с бавно изпълнение (1 ч. 12 мин. на задача).
Какво представлява GLM-Legal?
GLM-Legal е специализирана за конкретна област версия на GLM-5.3-Flash за адвокатски кантори, вътрешни юридически отдели и екипи по съответствие. Базата е първият нативно мултимодален GLM-5 модел на Z.ai. Той има общо 320B параметри, от които 18B са активни. Комбинира разредено и линейно внимание, за да намали разходите за обслужване на дълъг контекст. Чете текст, изображения, видео и файлове и генерира текст.
Как е обучен GLM-Legal?
Обучението премина на 2 етапа:
- Междинно обучение върху разширени правни корпуси за укрепване на разсъжденията от фактите през правилата до заключенията.
- Дообучаване с обучение чрез подсилване в десетки хиляди среди за правни задачи.
Екипът на Z.ai описва и съвместното развитие на агентната инфраструктура с модела по време на дообучаването. Граничните случаи в обучението разкриват тесни места в инфраструктурата. След това корекциите в инфраструктурата излагат модела на по-реалистични ограничения.
Какъв резултат постига GLM-Legal в Harvey’s Legal Agent Benchmark?
Harvey LAB е бенчмарк с отворен код, включващ 1250 задачи в 24 области на практиката. Работата се оценява по над 75 000 критерия от рубрики, написани от експерти. Една задача се счита за премината само ако всички критерии са изпълнени. Harvey нарича това оценяване с пълно преминаване.
Vals AI изпълнява задържания набор с 2 LLM съдии и изключен интернет. Агентите получават инструменти за работа с файлове, както и умения за docx, pptx и xlsx.
В тази класация GLM-Legal постига 19,17% и заема №7 от 79. Базовият му модел GLM-5.3-Flash постига 6,67%. Подобрението от 12,5 пункта е основното твърдение, което е възпроизведено и от независим оценител.
Графиката на Z.ai при представянето показва GLM-Legal пред Kimi K3 (12,92%), Claude Fable 5 (11,25%) и GPT-6 Astra (5,42%). Тези стойности съвпадат с данните на Vals AI. В графиката липсват 6 модела, класирани по-високо, начело с Muse Spark 1.2 с 25,42%.
GLM-Legal също така преминава 92,5% от отделните критерии. Водещите модели постигат между около 90% и 95% по този показател.
Съответства ли GLM-Legal на водещите модели в LegalBench?
Горе-долу. Z.ai твърди, че постига паритет в LegalBench и фокусирания върху китайското право PLawBench, без да публикува числа. Vals AI оценява GLM-Legal на 86,23% в LegalBench. Claude Fable 5 води с 88,56%. Kimi K3 постига 86,21%.
Как се сравнява GLM-Legal с Kimi K3, Claude Fable 5 и GPT-6 Astra?
| GLM-Legal | GLM-5.3-Flash (базов) | Kimi K3 | Claude Fable 5 | GPT-6 Astra | |
|---|---|---|---|---|---|
| Разработчик | Z.ai | Z.ai | Moonshot AI | Anthropic | OpenAI |
| Общо / активни параметри | Изграден върху база с 320B / 18B | 320B / 18B | 2,8T / 104B | Не са разкрити | Не са разкрити |
| Контекстен прозорец | 1M | 1M | 1M | 1M | 1M |
| Тегла / лиценз | Няма публични тегла | Отворен, MIT | Отворен, лиценз Kimi K3 | Собственически | Собственически |
| Harvey LAB (преминати задачи) | 19,17% | 6,67% | 12,92% | 11,25% | 5,42% |
| LegalBench | 86,23% | 83,93% | 86,21% | 88,56% | Не е посочено от Vals |
| Legal Research Bench | 41,83% | 45,19% | 46,15% | 49,52% | 39,42% |
| Цена на тест в Harvey LAB | $0,15 | $0,57 | $3,83 | $19,23 | $26,16 |
| Средна продължителност в Harvey LAB | 1 ч. 12 мин. | 52 мин. 17 сек. | 13 мин. 58 сек. | 26 мин. 53 сек. | 24 мин. 49 сек. |
| Цена на API (вход / изход, на 1M токена) | Не е публикувана | $0,15 / $0,50 | $3 / $15 | $10 / $50 | $10 / $50 |
| Достъп | API чрез кандидатстване | API, Hugging Face | API, Hugging Face | API | API |
Всички резултати от бенчмаркове, разходи и продължителности са от изпълненията на Vals AI към 12 октомври 2026 г. Vals е тествал и двата GLM модела при $0,075 / $0,25 на 1M токена.
Как разработчиците могат да получат достъп до GLM-Legal?
Адвокатски кантори, компании за правни технологии и вътрешни екипи могат да кандидатстват за API достъп. Z.ai не е публикувала цена. Към 13 октомври 2026 г. в Hugging Face няма хранилище за GLM-Legal. Z.ai казва, че GLM-Legal ще бъде достъпен в AutoClaw, настолното приложение за агенти на компанията, но не посочва дата.
Базовият модел е достъпен още днес на цена от $0,15 / $0,50 на 1M токена. Екипите могат да създадат прототипи на работни процеси с него, а по-късно да сменят идентификатора на модела.
Основни изводи
- GLM-Legal постига 19,17% в Harvey LAB спрямо 6,67% за базовия си модел.
- Той заема №7 от 79 във Vals AI, зад 6 модела на Meta и Google.
- Цената му е $0,15 на тест в Harvey LAB спрямо $19,23 за Claude Fable 5.
- Резултатът в Legal Research Bench е спаднал с 3,36 пункта спрямо GLM-5.3-Flash.
- Достъпът е само чрез кандидатстване, без публикувани цена или тегла.
Разгледайте технологичния блог на Z.ai, класацията Harvey LAB на Vals AI и картата на модела GLM-5.3-Flash. Кандидатствайте за API достъп тук.. Всички заслуги принадлежат на изследователя на този проект. Също така, не се колебайте да ни последвате в Twitter и не забравяйте да се присъедините към нашия ML SubReddit с над 150 хил. членове и да се абонирате за нашия бюлетин. Чакайте! В Telegram ли сте? Сега можете да се присъедините към нас и в Telegram.
Преведено автоматично от английски. Оригиналната статия е на връзката по-долу.