NVIDIA випустила чотири відкриті моделі Cosmos 3 для симуляції

NVIDIA додала до сімейства світових моделей Cosmos 3 чотири чекпойнти з відкритими вагами для інтерактивного моделювання середовища. Cosmos3-Nano-Transfer-Auto генерує синхронізовані дані для сценаріїв водіння з використанням до 11 камер і підтримує спільне створення RGB- та LiDAR-даних. Cosmos3-Nano-Sim-Auto формує послідовні фрагменти відео з камер і LiDAR на основі команд керування автомобілем, забезпечуючи потокову генерацію та тривалі інтерактивні запуски.

Дві інші моделі орієнтовані на робототехніку та роботу із симуляторами. Cosmos3-Nano-Sim-Transfer перетворює параметри симулятора й текстовий запит на згенеровані RGB-спостереження. Cosmos3-Nano-Sim-Bimanual прогнозує наступне відео за діями робота або камери та підтримує інтерактивну симуляцію дворуких маніпуляцій для платформ YAM і AgiBot.

Усі чотири чекпойнти є донавченими версіями Cosmos 3 Nano і мають 16B параметрів, що навчаються. Їх випущено за OpenMDW1.1, умови якої дозволяють комерційне та некомерційне використання. NVIDIA позиціонує моделі як основу для адаптації до різних сенсорних систем, середовищ водіння й роботизованих платформ, водночас зазначаючи потребу в подальшій оцінці їхніх обмежень і придатності для навчання та перевірки політик.