Данияр Хафнер создает ИИ-агентов для незнакомых сред
Данияр Хафнер развивает в Сан-Франциско стартап, работающий в закрытом режиме. Его задача — научить системы искусственного интеллекта действовать в средах, которых не было в обучающих данных. В почти пустом офисе находятся гуманоидные роботы, привезенные из Китая. Хафнер называет их физическим продолжением своих исследований, но пока не раскрывает название компании и подробности ее планов.
Исследователь применяет обучение с подкреплением на основе моделей. Создаваемые им модели мира имитируют физическую реальность: агент тренируется внутри симуляции, прогнозирует возможные последствия и выбирает действия заранее. Такой подход должен помочь роботам справляться с неизвестными условиями, например с новой планировкой и мебелью в доме. Он также снижает необходимость в традиционном обучении роботов методом проб и ошибок непосредственно в реальном мире.
В 2015 году Хафнер стал студентом-исследователем Google, затем работал в Google Brain и Google DeepMind. Среди его проектов — PlaNet и серия Dreamer. Dreamer 2 достиг уровня человека в играх Atari 2600, Dreamer 3 самостоятельно решил задачу добычи алмазов в Minecraft, а Dreamer 4 обучался на записанных видео игрового процесса, не взаимодействуя с игрой напрямую. Проект DayDreamer применил этот метод к роботам. Хафнер ушел из Google DeepMind и основал стартап осенью 2025 года.
Текст подготовлен ИИ Sakhanda Wire по материалу MIT Tech Review. Факты, цитаты и полный контекст — в оригинальной статье ниже.