Black Forest Labs запускає FLUX 3 Action, відкриту ШІ-модель для робототехніки

Black Forest Labs випускає FLUX 3 Action — відкриту модель ШІ, розроблену для робототехніки. Вона базується на мультимодальній моделі FLUX 3, яку переважно навчали на відео, а також на даних зображень і аудіо. Як модель світу та дій, вона отримує відеопотоки з кількох камер робочого простору робота й прогнозує, яку дію агент має виконати далі та як унаслідок цього зміниться середовище.

У таблиці лідерів RoboLab-120 FLUX 3 Action встановлює рекорд за показником успішності, маючи лише сім мільярдів параметрів, повідомляє BFL. Це менш ніж половина розміру попередньої найкращої відкритої моделі, водночас модель працює до 3,95 раза швидше. За словами BFL, великі моделі міркування добре планують, але часто надто повільні й громіздкі для роботів, тому така ефективність критично важлива для розгортання безпосередньо на пристрої. BFL також вбачає потенціал у цифрових середовищах, де відеоігри слугують полігонами для тестування навігації, а агенти, що швидко реагують і керують комп’ютерами, згодом зможуть використовувати ці напрацювання. Ваги доступні на Hugging Face.

Новини ШІ без хайпу — відібрані людьми

Підпишіться на THE DECODER, щоб читати без реклами, отримувати щотижневу розсилку про ШІ та ексклюзивний звіт про передові розробки «AI Radar» шість разів на рік, мати повний доступ до архіву й розділу коментарів.