FLUX 3 Action очолила RoboLab-120 серед робототехнічних моделей
Black Forest Labs випустила FLUX 3 Action — World Action Model із 7B параметрів і відкритими вагами для керування роботами. Модель отримує кадри з камери, дані про стан робота й текстову інструкцію, а потім одночасно прогнозує майбутні відеокадри та наступну послідовність дій. У RoboLab-120 вона показала результат 42,92% успішних завдань і посіла перше місце серед наведених систем.
RoboLab-120 містить 120 настільних завдань в Isaac Sim, кожне з 10 випробуваннями на установці з роботом Franka, побудованій за схемою DROID. FLUX 3 Action випередила Cosmos 3 Nano з результатом 36,8% на 6,1 відсоткового пункта, використовуючи на 56% менше параметрів. У сліпому тестуванні Positronic Robotics модель виконала 28 із 30 спроб для 10 завдань DROID. Cosmos 3 Nano виконала 27 спроб.
BFL пропонує базовий, guidance-distilled і step-distilled варіанти політики DROID. Найшвидший варіант використовує один крок семплювання, але має нижчу успішність. За один виклик модель генерує 32 дії з частотою 15 Hz. Для BF16 потрібно близько 32 GB відеопам’яті; квантизація FP8 і винесення текстового енкодера дають змогу працювати з 24 GB. Ліцензія FLUX Kommunity дозволяє некомерційне використання. Обмеження швидкості, зусилля та робочої зони має встановлювати застосунок.
Текст підготовлено ШІ Sakhanda Wire за матеріалом MarkTechPost. Факти, цитати та повний контекст — в оригінальній статті нижче.