GPT-6 Astra управлява робот при почистване на непозната кухня
Изследователи от Stanford и Caltech са разработили HomeBody — система, с която хуманоидният робот Unitree G1 може самостоятелно да се движи в непозната кухня. Роботът подрежда помещението и взема предмети от чекмеджета, като използва GPT-6 Astra като зрително-езиков модел.
HomeBody премахва обичайния отделно обучен контролен слой между езиковия модел и робота. Вместо това моделът извиква разширяема библиотека от умения, включително хващане, навигация и отваряне на чекмеджета. Първо роботът изследва средата, изгражда нейно цифрово копие в Nvidia's Isaac Sim и записва предметите и местоположението им в пространствена памет. Така може да намира обекти и след като те излязат от зрителното му поле.
При задача като „почисти кухнята“ моделът планира последователността от действия и коригира поведението си при грешки. Сред посочените ограничения са забавянето на Astra, прегряването на сервомоторите в пръстите и високите изчислителни разходи. Кодът на HomeBody е публикуван в GitHub. По-ранни оценки са отчели подобрено пространствено разсъждение на Astra, а друго изследване е посочило рискове за безопасността при управлението на робот.
Текстът е изготвен от ИИ на Sakhanda Wire по материал на The Decoder. Фактите, цитатите и пълният контекст са в оригиналната статия по-долу.