Sakhanda Wire
NVDA $230.86 +1.09% MSFT $512.80 -0.02% GOOGL $338.24 -1.70% META $725.93 +0.10% AMZN $248.23 -0.37%
← До новин

StepFun запускає попередню версію Step 5: MoE-модель із 600 млрд параметрів загалом і 27 млрд активних, контекстом у 1 млн токенів для довготривалої агентної роботи

StepFun випустила Step 5 Preview, свою нову флагманську модель для агентної роботи. Цільові завдання — розробка програмного забезпечення, професійна робота зі знаннями та фінанси. Головна перевага — вартість. Команда StepFun заявляє, що модель забезпечує зіставний рівень інтелекту за значно нижчої вартості виконання завдань. Саме це мається на увазі під «фронтом Парето» в назві запуску.

Чи придатна вона до розгортання? Так, як розміщений API і на платформі StepFun. Для самостійного розгортання доведеться дочекатися відкритих ваг. StepFun повідомляє, що відкриті ваги з’являться 15 жовтня 2026 року. За простим підрахунком, 600B параметрів потребують близько 1,2 ТБ у BF16, ще до врахування KV-кешу. Після виходу ваг плануйте серверне обладнання з кількома GPU.

Що випустила StepFun

Step 5 Preview — це розріджена модель Mixture-of-Experts (MoE). Вона містить близько 600B загальних параметрів і активує близько 27B на токен. Це приблизно 4,5% ваг на токен.

В офіційній документації моделі наведено такі характеристики:

  • Ідентифікатор моделі: step-5-preview
  • Контекстне вікно: 1M токенів
  • Вхідні дані: текст, зображення та відео
  • Вихідні дані: текст
  • Рівень міркування: low, medium і high
  • Потокова передача, виклик інструментів, JSON Mode, JSON Schema та кешування запитів

Для дослідницьких завдань команда StepFun заявляє, що модель скоординувала 950 вебзапитів в межах однієї дії агента. Команда StepFun також документує інтеграцію з Claude Code через свій Step Plan.

Архітектура: вузька й глибока

StepFun не розширювала мережу. Вона об’єднала 92 шари Transformer у вузькій і глибокій конфігурації, за даними Pandaily. Дослідницька команда стверджує, що глибші стеки забезпечують довші шляхи для неявного багатокрокового міркування. Це важливо під час тривалого попереднього заповнення, коли агенти здійснюють пошук, запускають код і читають результати роботи інструментів.

Навчання значною мірою спирається на навчання з підкріпленням за політикою на довгому горизонті. StepFun посилається на побітове узгодження навчання та інференсу між маршрутами MoE. Серед інших зазначених методів — спекулятивне декодування MTP-3, FP8 MoE та вивантаження KV-кешу. StepFun повідомляє про більш ніж триразове прискорення наскрізного виконання для RL на довгому горизонті.

Інтерактивне пояснення

Бенчмарки: заявлені компанією проти незалежних

Step 5 Preview працювала на рівні High, тоді як конкуренти — на рівні Max.

StepFun повідомляє такі результати, за даними RuntimeWire:

БенчмаркStep 5 PreviewClaude Opus 5GPT-6 Astra
FrontierFinance66.469.755
DRACO83.387.676.8

У програмуванні StepFun повідомляє результат 67.7 у DeepSWE v1.1, 49.0 у StepCodeBench і 80.5 у ProgramBench. GPT-6 Astra та Claude Opus 5 випереджають її в усіх трьох. StepCodeBench — власний бенчмарк StepFun.

StepFun також провела 2 експерименти з агентами, кожен тривалістю 24 години. У першому модель налаштувала ядро H100 до 508 TFLOPS проти 493 у Claude Opus 5. У другому вона підвищила результат Qwen3-30B-A3B на AIME24 з 53,3% до 60% завдяки автоматизованому донавчанню.

Незалежна перевірка надійшла від Artificial Analysis. Сервіс оцінює Step 5 Preview у 44 бали за своїм індексом інтелекту. Медіанне значення для моделей міркування у схожому ціновому сегменті становить 24. На API StepFun було виміряно швидкість генерації 99,8 токена на секунду.

Ціни

Тарифи API StepFun за 1M токенів:

Тип токенівЦіна
Вхідні, промах кешу$1.00
Вхідні, влучання в кеш$0.05
Вихідні, включно з міркуванням$2.70

Artificial Analysis оцінює медіанні значення для зіставних моделей у $1.88 за вхідні та $10.00 за вихідні дані. Є один нюанс. Під час запуску індексу модель згенерувала 160M вихідних токенів проти медіанного значення 92M. Багатослівне міркування нівелює частину економії на токенах.

Основні висновки

  • Step 5 Preview від StepFun — це MoE-модель із 600B загальних і 27B активних параметрів.
  • Вона пропонує контекст на 1M токенів із підтримкою тексту, зображень і відео на вході.
  • Ціна API становить $1.00 за вхідні та $2.70 за вихідні дані на 1M токенів.
  • Artificial Analysis оцінює її в 44 бали за своїм індексом інтелекту.
  • Вихід відкритих ваг заплановано на 15 жовтня 2026 року.

Часті запитання

  1. Що таке Step 5 Preview? Це флагманська MoE-модель StepFun для агентного програмування, роботи зі знаннями та фінансів.
  2. Чи має Step 5 Preview відкриті ваги? Ще ні. StepFun планує випустити відкриті ваги 15 жовтня 2026 року.
  3. Який розмір контекстного вікна? 1M токенів, згідно з документацією StepFun.
  4. Скільки це коштує? $1.00 за 1M вхідних токенів і $2.70 за 1M вихідних токенів.

Ознайомтеся з розділом технічних деталей. Уся заслуга належить досліднику цього проєкту. Також підписуйтеся на нас у Twitter і не забудьте приєднатися до нашого субреддіту про машинне навчання зі 150k+ учасників та підписатися на нашу розсилку. Стривайте! Ви є в Telegram? Тепер ви також можете приєднатися до нас у Telegram.

Потрібно співпрацювати з нами для просування вашого репозиторію GitHub, сторінки Hugging Face, релізу продукту, вебінару тощо? Зв’яжіться з нами

Перекладено автоматично з англійської. Оригінал статті — за посиланням нижче.

Вперше опубліковано виданням MarkTechPost

Читати оригінал на MarkTechPost ↗

Текст і зображення належать MarkTechPost і наводяться тут із зазначенням авторства та посиланням на оригінальну публікацію.

← До новин

Ще новини

Усі останні новини