FLUX 3 Action возглавила RoboLab-120 среди моделей для роботов
Black Forest Labs выпустила FLUX 3 Action — World Action Model с 7B параметров и открытыми весами для управления роботами. Модель получает кадры с камеры, данные о состоянии робота и текстовую инструкцию, а затем одновременно прогнозирует будущие видеокадры и следующую последовательность действий. В RoboLab-120 она показала результат 42,92% успешных заданий и заняла первое место среди представленных систем.
В RoboLab-120 входят 120 настольных задач в Isaac Sim; каждая проверяется в 10 испытаниях на установке с роботом Franka, построенной по типу DROID. FLUX 3 Action опередила Cosmos 3 Nano с результатом 36,8% на 6,1 процентного пункта, используя на 56% меньше параметров. В слепом тесте Positronic Robotics модель выполнила 28 из 30 попыток на 10 задачах DROID. Cosmos 3 Nano выполнила 27 попыток.
BFL выпускает базовый, guidance-distilled и step-distilled варианты политики DROID. Самый быстрый вариант работает с одним шагом семплирования, но его успешность ниже. За один вызов модель выдает 32 действия с частотой 15 Hz. Для BF16 требуется около 32 GB видеопамяти; при квантизации FP8 и выгрузке текстового энкодера достаточно 24 GB. Лицензия FLUX Kommunity разрешает некоммерческое использование. Ограничения скорости, усилия и рабочей зоны приложение должно задавать самостоятельно.
Текст подготовлен ИИ Sakhanda Wire по материалу MarkTechPost. Факты, цитаты и полный контекст — в оригинальной статье ниже.