Sakhanda Wire
NVDA $152.58 -2.28% MSFT $506.11 -2.29% GOOGL $279.81 -1.38% META $619.07 -1.17% AMZN $256.55 -0.47%
← До новин

GLM-5.3 лідирує в одному кібернетичному тесті, але поступається у двох

Компанія Zhipu, яка також працює під назвою Z.ai, 14 серпня представила орієнтовану на програмування модель GLM-5.3 та оприлюднила її порівняння з конкурентами. У тесті CyberGym, що перевіряє пошук і підтвердження вразливостей за вихідним кодом, модель набрала 84,5%. Це трохи більше за результати Mythos 5 від Anthropic — 83,8% — і GPT-5.6 Sol від OpenAI — 83,6%.

В інших двох кібернетичних тестах перевага була не на боці GLM-5.3. У ExploitBench модель отримала 54,4%, тоді як Mythos 5 — 78,0%, а GPT-5.6 Sol — 76,5%. У ExploitGym GLM-5.3 виконала 105 завдань за дві години та 130 за шість годин. Mythos 5 виконала відповідно 181 і 247. Zhipu зазначає, що можливості моделі найшвидше зростають саме в тих сферах, де її відставання найбільше.

Показник CyberGym отримано під час одного запуску в режимі pass@1 на 1507 завданнях; дані про варіативність не наведені. Zhipu також повідомила про 2436 вразливостей у 269 проєктах із відкритим кодом після експертної перевірки та усунення дублікатів. 53 випадки оприлюднено, а 2383 залишаються під ембарго. Компанія планує випустити ваги моделі після оцінювання та посилення безпеки, але на момент публікації цього ще не сталося.

Текст підготовлено ШІ Sakhanda Wire за матеріалом AI News. Факти, цитати та повний контекст — в оригінальній статті нижче.

Вперше опубліковано виданням AI News

Читати оригінал на AI News ↗

Репортаж і зображення належать AI News і зазначені вище з посиланням на оригінал; текст на цій сторінці — власний виклад Sakhanda Wire.

← До новин

Ще новини

Усі останні новини