Black Forest Labs представила робототехническую модель FLUX 3 Action
Black Forest Labs выпустила FLUX 3 Action — открытую модель искусственного интеллекта для робототехники. Она развивает мультимодальную модель FLUX 3, обученную главным образом на видеоданных, а также на изображениях и аудио. FLUX 3 Action получает видеопотоки с нескольких камер, наблюдающих за рабочей зоной робота, и прогнозирует следующее действие агента вместе с тем, как после этого изменится окружающая среда.
По данным Black Forest Labs, модель показала рекордный показатель успешных выполнений в рейтинге RoboLab-120, используя семь миллиардов параметров. Компания утверждает, что это менее половины размера предыдущей лучшей открытой модели, а скорость работы может быть до 3,95 раза выше. В Black Forest Labs отмечают, что крупные модели рассуждений способны хорошо планировать, но для роботов часто оказываются слишком медленными и требовательными к ресурсам. Поэтому эффективность важна для работы непосредственно на устройстве. Среди возможных применений также названы цифровые среды, видеоигры и агенты, которые в будущем смогут быстро выполнять действия на компьютерах. Веса модели опубликованы на Hugging Face.
Текст подготовлен ИИ Sakhanda Wire по материалу The Decoder. Факты, цитаты и полный контекст — в оригинальной статье ниже.