Sakhanda Wire
NVDA $210.96 -0.59% MSFT $524.51 +0.66% GOOGL $320.21 -1.24% META $642.62 -0.96% AMZN $248.00 -0.95%
← Към новините

Nanbeige пусна Nanbeige4.3-33B — 33B отворен агентен модел за програмиране

Лабораторията за LLM Nanbeige пусна Nanbeige4.3-33B в Hugging Face под лиценза Apache 2.0. Nanbeige4.3-33B е плътен езиков модел с 33B параметъра, създаден за агентно програмиране и офисни задачи тип „cowork“. Лабораторията е част от платформата за подбор на персонал BOSS Zhipin. Тя публикува и Nanbeige4.3-33B-Base за персонализирано допълнително обучение. Моделът поддържа контекстен прозорец от 524 288 токена. В собствената таблица на лабораторията той води в 17 от 20 бенчмарка спрямо 3 отворени модела с около 30B параметъра.

Накратко

  • Размер: 33B параметъра, плътен модел (без MoE), контекст от 524 288 токена (512K), тегла BF16.
  • Работи на: Многографични сървъри. Рецептите за SGLang и vLLM в картата използват 4-посочен тензорен паралелизъм. Теглата BF16 изискват около 66 GB (по наши изчисления). Посочена е 1 общностна квантизация.
  • Производителност: Води в 17 от 20 реда в собственото сравнение на Nanbeige с Qwen3.8-27B, Muse-Glimmer-30B и Gemma4-31B.
  • Най-добър резултат: 80.9 на Terminal-Bench 2.1 спрямо 73.0 за Qwen3.8-27B.
  • Най-слаб резултат: 23.8 на Terminal-Bench 4.0 (най-ниският му резултат). Той също изостава от Qwen3.8-27B на SWE-Bench Pro — 60.3 спрямо 61.7.

Какво представлява Nanbeige4.3-33B?

Nanbeige4.3-33B е водещият „учителски“ модел от серията Nanbeige4.3. Обявената стратегия на лабораторията е първо да създаде силен учителски модел. След това тя планира да дистилира агентни умения в по-малки модели, започвайки с Nanbeige4.3-3B.

Как е създаден Nanbeige4.3-33B?

config.json декларира стандартна архитектура LlamaForCausalLM. Няма маршрутизиране към експерти, така че всичките 33B параметъра се изпълняват за всеки токен.

  • 52 слоя, размер на скрития слой 7 168
  • 56 глави за заявки и 8 глави за ключове и стойности (групирано-заявково внимание), размерност на главата 128
  • Междинен размер на FFN 22 016, речник от 166 912 токена
  • RoPE theta от 120 000 000 и максимум 524 288 позиции

Шаблонът за чат предоставя 3 контроли. enable_thinking включва разсъжденията и е активиран по подразбиране. preserve_thinking запазва разсъжденията от предишни ходове. Nanbeige го препоръчва за използване на инструменти в многоходови разговори и за кодови агенти. Подаването на tools активира извикването на инструменти, като се препоръчва XML формат за извикванията.

Как се представя Nanbeige4.3-33B на бенчмарковете?

Nanbeige сравнява модела с Qwen3.8-27B, Muse-Glimmer-30B и Gemma4-31B. Всеки модел е работил с максималното си ниво на усилие за разсъждение, при общи хиперпараметри и тестови среди. Всички резултати в този раздел са съобщени от самата компания.

  • Агентно програмиране: Моделът постига 80.9 на Terminal-Bench 2.1 спрямо 73.0 за Qwen3.8-27B. DeepSWE показва най-голямата разлика: 65.5 спрямо 42.5. На Terminal-Bench 4.0 той постига 23.8, докато Gemma4-31B постига 0.0.
  • Агентна офисна работа: Той постига 54.2 на Automation Bench спрямо 38.3 и 44.8 на JobBench спрямо 34.5. На YC-bench симулираните приходи достигат 1 025 437 долара спрямо 641 290 долара.
  • Разсъждения: Съобщава се резултат 95.2 на AIME 2026 и 84.0 на AA-LCR.

Той губи в 3 от 20 реда. Qwen3.8-27B води на SWE-Bench Pro (61.7 спрямо 60.3) и GDPval (86.4 спрямо 84.8). Gemma4-31B води на GPQA Diamond в таблицата на Nanbeige — 91.3 спрямо 89.5.

Базовият модел превъзхожда Gemma4-31B-Base във всичките 8 отчетени задачи. Примерите включват MMLU-Pro (66.9 спрямо 59.3) и GPQA (62.0 спрямо 41.5).

Назад</button><button class="btn" id="nbgNext">Следваща стъпка ▶</button><button class="btn ghost" id="nbgPlay">Автоматично възпроизвеждане</button></div> <div class="spec"> <div><b>52</b><span>слоя</span></div> <div><b>56 / 8</b><span>глави за заявки / KV (GQA)</span></div> <div><b>7 168</b><span>размер на скрития слой</span></div> <div><b>524 288</b><span>максимален брой позиции</span></div> </div> </div> <div class="pane" id="p2"> <div class="seg" id="nbgSeg"> <button class="on" data-c="coding">Агентно програмиране</button> <button data-c="cowork">Агентна офисна работа</button> <button data-c="reason">Разсъждения</button> <button data-c="base">Базов модел</button> </div> <div class="legend" id="nbgLegend"></div> <div id="nbgBars"></div> <p class="note">Всички резултати са съобщени от Nanbeige в картите на моделите в Hugging Face, при максималното ниво на усилие за разсъждение на всеки модел и общи тестови среди. Не са независимо проверени.</p> </div> <div class="pane" id="p3"> <div class="calc"> <div> <div class="field"><label>Дължина на контекста <b id="nbgCtxL">131 072 токена</b></label><input type="range" id="nbgCtx" min="0" max="6" step="1" value="4"></div> <div class="field"><label>Паралелни последователности <b id="nbgSeqL">1</b></label><input type="range" id="nbgSeq" min="1" max="8" step="1" value="1"></div> <div class="seg" id="nbgW"><button class="on" data-w="2">Тегла BF16</button><button data-w="1">8-битови тегла</button></div> <div class="seg" id="nbgK"><button class="on" data-k="2">KV кеш BF16</button><button data-k="1">KV кеш FP8</button></div> <p class="note">Изчисления от config.json: 52 слоя × 8 KV глави × 128 измерения × 2 (K и V) × байтове за стойност. Това са 212 992 байта (около 208 KiB) на токен в BF16. За теглата се използват 33B параметъра. Не са включени активациите и разходите на рамката.</p> </div> <div class="stack"> <div class="kv"><span>Изчислена памет на графичния процесор</span></div> <div class="total" id="nbgTot">0 GB</div> <div class="stackbar"><i id="nbgBw" style="background:#5fd3bd"></i><i id="nbgBk" style="background:#7c8cf8"></i></div> <div class="kv"><span><i style="display:inline-block;width:9px;height:9px;background:#5fd3bd;border-radius:2px"></i> Тегла</span><b id="nbgWv"></b></div> <div class="kv"><span><i style="display:inline-block;width:9px;height:9px;background:#7c8cf8;border-radius:2px"></i> KV кеш</span><b id="nbgKv"></b></div> <div class="kv"><span>На 80 GB графичен процесор (идеално разпределение)</span><b id="nbgGpu"></b></div> <p class="note">Рецептите за SGLang и vLLM в картата на модела използват 4-посочен тензорен паралелизъм.</p> </div> </div> </div> <div class="pane" id="p4"> <table> <tr><th>Ред в таблицата на Nanbeige</th><th>Посочено от Nanbeige</th><th>Официална карта</th><th></th></tr> <tr><td>Muse-Glimmer-30B, SWE-Bench Pro</td><td class="bad">36.9</td><td>51.2 (Meta)</td><td><span class="flag">изглежда разменено</span></td></tr> <tr><td>Gemma4-31B, SWE-Bench Pro</td><td class="bad">51.2</td><td>36.9 (съобщено от Meta)</td><td><span class="flag">изглежда разменено</span></td></tr> <tr><td>Gemma4-31B, GPQA Diamond</td><td class="bad">91.3</td><td>84.3 (Google)</td><td><span class="flag">несъответствие</span></td></tr> <tr><td>Muse-Glimmer-30B, Terminal-Bench 2.1</td><td class="bad">61.8</td><td>51.7 (Meta)</td><td><span class="flag">тестова среда?</span></td></tr> <tr><td>Qwen3.8-27B, GPQA Diamond</td><td>89.2</td><td>89.2 (Qwen)</td><td>съвпадение</td></tr> <tr><td>Muse-Glimmer-30B, AIME 2026</td><td>94.7</td><td>94.7 (Meta)</td><td>съвпадение</td></tr> </table> <p class="note">Nanbeige е изпълнила отново всеки модел със собствена тестова среда, което обяснява някои от разликите. Други ограничения: вход само под формата на текст, плътно изчисление за всеки токен и Nanbeige4.3-3B все още не е пуснат.</p> </div> <div class="ft"><span>Източници: <a href="https://huggingface.co/Nanbeige/Nanbeige4.3-33B" target="_blank" rel="noopener">карта на модела Nanbeige</a> · <a href="https://huggingface.co/Nanbeige/Nanbeige4.3-33B-Base" target="_blank" rel="noopener">карта на базовия модел</a> · карти на конкурентни модели в HF</span><span class="brand">© Marktechpost</span></div> </div> <script> (function(){ var R=document.getElementById('mtp-nbg43'); function resize(){try{parent.postMessage({type:'mtp-nbg43-resize',height:R.offsetHeight+40},'*')}catch(e){}} // раздели R.querySelectorAll('.tab').forEach(function(t){t.addEventListener('click',function(){ R.querySelectorAll('.tab').forEach(function(x){x.classList.remove('on')});t.classList.add('on'); R.querySelectorAll('.pane').forEach(function(p){p.classList.remove('on')}); document.getElementById(t.dataset.p).classList.add('on'); if(t.dataset.p==='p2')drawBars(cur); setTimeout(resize,50);setTimeout(resize,400); })}); // поток var steps=[ '<b>Базов модел.</b> Nanbeige4.3-33B-Base е плътен контролен модел LlamaForCausalLM. Nanbeige съобщава, че той превъзхожда Gemma4-31B-Base във всичките 8 посочени задачи, например MMLU-Pro 66.9 спрямо 59.3.', '<b>Агент-учител.</b> Моделът с допълнително обучение разсъждава по подразбиране (<code>enable_thinking</code>). <code>preserve_thinking</code> запазва предишните разсъждения за използване на инструменти в многоходови разговори. Nanbeige препоръчва XML формата за извикване на инструменти.', '<b>Агентна тестова среда.</b> Nanbeige го е оценила в Terminus 2, mini-swe-agent v2.4.6 и тестовата среда Claude Code. Препоръчителни настройки за семплиране на агента: temperature 1.0, top_p 0.95, максимум 65 536 нови токена.', '<b>Дистилация.</b> Моделът 33B е учителят за серията Nanbeige4.3. Първият планиран ученик е Nanbeige4.3-3B. Не е посочена дата на пускане.' ]; var s=0,timer=null; function setStep(i){s=(i+4)%4;R.querySelectorAll('.node').forEach(function(n,k){n.classList.toggle('on',k<=s)}); document.getElementById('nbgRail').style.width=((s+1)*25)+'%';document.getElementById('nbgDetail').innerHTML=steps[s];resize()} R.querySelectorAll('.node').forEach(function(n){n.addEventListener('click',function(){stop();setStep(+n.dataset.s)})}); function stop(){if(timer){clearInterval(timer);timer=null;document.getElementById('nbgPlay').textContent='Автоматично възпроизвеждане'}} document.getElementById('nbgNext').onclick=function(){stop();setStep(s+1)}; document.getElementById('nbgPrev').onclick=function(){stop();setStep(s-1)}; document.getElementById('nbgPlay').onclick=function(){if(timer){stop();return}this.textContent='Пауза';timer=setInterval(function(){setStep(s+1)},2200)}; setStep(0); // ленти var M={n:['Nanbeige4.3-33B','#5fd3bd'],q:['Qwen3.8-27B','#7c8cf8'],m:['Muse-Glimmer-30B','#f0a35e'],g:['Gemma4-31B','#6aa9f4']}; var D={ coding:[['Terminal-Bench 2.1',80.9,73.0,61.8,47.2],['DeepSWE',65.5,42.5,4.4,2.7],['SWE-Bench Pro',60.3,61.7,36.9,51.2],['SkillsBench',61.1,56.4,39.7,28.9],['Terminal-Bench 4.0',23.8,6.3,1.6,0.0]], cowork:[['Automation Bench',54.2,38.3,15.2,9.7],['JobBench',44.8,34.5,16.6,9.0],['GDPval',84.8,86.4,75.8,71.4],['Toolathlon-Verified',70.4,68.5,47.2,27.8],['DeepPlanning',63.3,49.2,21.4,19.4]], reason:[['AIME 2026',95.2,94.5,94.7,89.2],['GPQA Diamond',89.5,89.2,83.5,91.3],['AA-LCR',84.0,82.0,83.3,72.0]], base:[['MMLU-Pro',66.9,null,null,59.3],['GPQA',62.0,null,null,41.5],['GSM8K',92.9,null,null,88.9],['Math',57.3,null,null,43.6],['CMMLU',86.8,null,null,76.9]] }; var cur='coding'; function drawBars(c){cur=c;var keys=c==='base'?['n','g']:['n','q','m','g']; var names=c==='base'?{n:'Nanbeige4.3-33B-Base',g:'Gemma4-31B-Base'}:{}; document.getElementById('nbgLegend').innerHTML=keys.map(function(k){return '<span><i style="background:'+M[k][1]+'"></i>'+(names[k]||M[k][0])+'</span>'}).join(''); var idx={n:1,q:2,m:3,g:4},h=''; D[c].forEach(function(r){h+='<div class="bench"><div class="bn">'+r[0]+'</div>'; keys.forEach(function(k){var v=r[idx[k]];h+='<div class="brow'+(k==='n'?' me':'')+'"><span class="lb">'+(names[k]||M[k][0])+'</span><div class="track"><div class="fill" data-w="'+v+'" style="background:'+M[k][1]+'"></div></div><span class="v">'+v.toFixed(1)+'</span></div>'}); h+='</div>'}); var box=document.getElementById('nbgBars');box.innerHTML=h; requestAnimationFrame(function(){requestAnimationFrame(function(){box.querySelectorAll('.fill').forEach(function(f){f.style.width=f.dataset.w+'%'})})}); resize();setTimeout(resize,300)} R.querySelectorAll('#nbgSeg button').forEach(function(b){b.onclick=function(){R.querySelectorAll('#nbgSeg button').forEach(function(x){x.classList.remove('on')});b.classList.add('on');drawBars(b.dataset.c)}}); drawBars('coding'); // изчисление var CT=[8192,16384,32768,65536,131072,262144,524288],wb=2,kb=2; function fmt(n){return n.toLocaleString('en-US')} function calc(){var ctx=CT[+document.getElementById('nbgCtx').value],seq=+document.getElementById('nbgSeq').value; document.getElementById('nbgCtxL').textContent=fmt(ctx)+' токена';document.getElementById('nbgSeqL').textContent=seq; var w=33e9*wb/1e9,kv=52*8*128*2*kb*ctx*seq/1e9,t=w+kv; document.getElementById('nbgTot').textContent=t.toFixed(1)+' GB'; document.getElementById('nbgWv').textContent=w.toFixed(1)+' GB';document.getElementById('nbgKv').textContent=kv.toFixed(1)+' GB'; document.getElementById('nbgGpu').textContent=Math.ceil(t/80)+' × 80 GB'; document.getElementById('nbgBw').style.width=(w/t*100)+'%';document.getElementById('nbgBk').style.width=(kv/t*100)+'%'} ['nbgCtx','nbgSeq'].forEach(function(id){document.getElementById(id).addEventListener('input',calc)}); R.querySelectorAll('#nbgW button').forEach(function(b){b.onclick=function(){R.querySelectorAll('#nbgW button').forEach(function(x){x.classList.remove('on')});b.classList.add('on');wb=+b.dataset.w;calc()}}); R.querySelectorAll('#nbgK button').forEach(function(b){b.onclick=function(){R.querySelectorAll('#nbgK button').forEach(function(x){x.classList.remove('on')});b.classList.add('on');kb=+b.dataset.k;calc()}}); calc(); window.addEventListener('load',resize);window.addEventListener('resize',resize);setTimeout(resize,200); })(); </script> </body></html> " style="width:100%!important;height:600px;border:0!important;background:transparent!important;display:block;" loading="lazy">

Как се сравнява със собствените карти на конкурентните модели?

СпецификацияNanbeige4.3-33BQwen3.8-27BMuse-Glimmer-30BGemma 4 31B
РазработчикNanbeige LLM Lab (BOSS Zhipin)Qwen (Alibaba)Meta Superintelligence LabGoogle DeepMind
Параметри33B плътен27B плътен LM плюс зрителен енкодер~29.6B плътен, включително ~1.8B зрителен енкодер30.7B плътен
Контекст524 288262 144 нативно, до 1M131 072+256K
Модалност на входаТекстТекст, изображение, видеоТекст, изображениеТекст, изображение
ЛицензApache 2.0Apache 2.0Apache 2.0Apache 2.0
Terminal-Bench 2.180.9*73.051.7Не е оповестено
SWE-Bench Pro60.3*61.751.2Не е оповестено
GPQA Diamond89.5*89.283.5 (AA)84.3
AIME 202695.2*Не е оповестено94.789.2
Насоки за локален хардуерРецепта за тензорен паралелизъм с 4 графични процесораНе е оповестено24 GB или 32 GB VRAM при ~4-битова квантизацияПотребителски графични процесори и работни станции

*Съобщено от Nanbeige. Стойностите за конкурентите идват от собствените карти на моделите на всяка лаборатория.

Някои данни за конкурентите в таблицата на Nanbeige се различават от публикуваното от съответните лаборатории:

  • Meta съобщава, че Muse-Glimmer-30B има 51.2 на SWE-Bench Pro, а Gemma4-31B — 36.9. Nanbeige посочва обратното.
  • Google посочва 84.3 за Gemma 4 31B на GPQA Diamond. В таблицата на Nanbeige е показано 91.3.
  • Meta съобщава 51.7 за Muse-Glimmer-30B на Terminal-Bench 2.1. Nanbeige е измерила 61.8.

Различните тестови среди обясняват някои от разликите. Двата резултата на SWE-Bench Pro изглеждат разменени. Тези редове трябва да се приемат като предварителни, докато не се появят независими изпълнения.

Как се внедрява Nanbeige4.3-33B?

Картата на модела предоставя рецепти за Transformers, SGLang и vLLM. Примерите за сървър използват 4-посочен тензорен паралелизъм с анализатори за разсъжденията и извикванията на инструменти на Qwen3. Препоръчителните настройки за агенти са temperature 1.0, top_p 0.95 и максимум 65 536 нови токена. За разсъждения и чат се използват temperature 0.6 и максимум 262 144 нови токена.

Според изчисленията от config.json теглата BF16 изискват около 66 GB. KV кешът добавя около 208 KiB на токен в BF16. Следователно пълна последователност от 524 288 токена изисква приблизително 112 GB KV кеш. Към момента на публикуване нито един доставчик на Inference Provider в Hugging Face не хоства модела.

Основни изводи

  • 33B плътен модел, Apache 2.0, контекст 512K, само текст.
  • Самосъобщен резултат 80.9 на Terminal-Bench 2.1 и 65.5 на DeepSWE.
  • Води в 17 от 20 реда в собствената таблица на Nanbeige.
  • Няколко данни за конкурентите противоречат на официалните карти.
  • Създаден е като учителски модел за предстоящия Nanbeige4.3-3B.

Разгледайте теглата на модела, базовия модел и публикацията за старта в X. Също така можете да ни последвате в Twitter и не забравяйте да се присъедините към нашия ML SubReddit с над 150 хиляди членове и да се абонирате за нашия бюлетин. Чакайте! В Telegram ли сте? Вече можете да се присъедините към нас и в Telegram.

Имате нужда от партньор за популяризирането на вашето GitHub хранилище, страница в Hugging Face, продуктова новост, уебинар и др.? Свържете се с нас

Преведено автоматично от английски. Оригиналната статия е на връзката по-долу.

Първоначално публикувано от MarkTechPost на

Прочетете оригинала в MarkTechPost ↗

Текстът и изображенията са собственост на MarkTechPost и са възпроизведени тук с посочване на авторството и връзка към оригиналната публикация.

← Към новините

Още новини

Всички последни новини