Gemini Omni 1.1 Flash позволяет создавать с большим контролем
27 авг. 2026 г.
|Теперь Omni обеспечивает создание видео студийного качества, включая возможность продлевать сцену, интерполяцию первого и последнего кадров, чёткое масштабирование до 4K, более быстрое прототипирование и многое другое.
Аниш Нангиа
Менеджер по продукту, Google DeepMind
Алиса Фортин
Менеджер по продукту, Google DeepMind
Сегодня мы представляем Gemini Omni 1.1 Flash — новый набор средств творческого управления и возможностей генеративного видео для разработчиков. Gemini Omni привнесла рассуждение о реальном мире в генеративное творчество, а сегодняшние обновления делают Omni 1.1 готовой к профессиональному использованию через Gemini API в Google AI Studio.
Создаёте ли вы рабочие процессы для генеративного видео, творческие инструменты или программное обеспечение для редактирования медиа, эти обновления делают генеративное видео более управляемым, ускоряют итерации и повышают качество, необходимое для развёртывания в реальных условиях. Ниже перечислены основные нововведения:
Продлевайте сцены для более длинных историй
Продление сцены позволяет взять существующее видео и плавно продолжить генерировать материал с того места, на котором оно остановилось.
В Omni 1.1 модель теперь может анализировать до 10 секунд предыдущего контекста — значительный шаг вперёд по сравнению с прежними моделями, которые учитывали только последнюю секунду. В результате улучшаются визуальная согласованность и соответствие повествованию, что позволяет создавать более длинные истории или развивать новые творческие направления. Видео можно продлевать с шагом в 10 секунд до общей накопленной длительности 40 секунд.
Запрос 1: Камера слегка панорамирует, и теперь мы видим, что она разговаривает с мужчиной с кудрявыми волосами; видна спина мужчины, он говорит: «Я тоже это вижу», драматическая музыкальная партитура
Запрос 2: Камера медленно отдаляется, забытые пыльные катакомбы, драматическая музыкальная партитура.
Запрос 3: Камера медленно отдаляется, огромная библиотека, где полки и книги невесомо парят в пыльной пустоте, драматическая музыкальная партитура.
Запрос 1: Продолжите видео. Выполните кинематографичный оптический эффект «долли-зум». Камера движется вперёд, одновременно отдаляя масштаб, сохраняя застывшее потрясённое лицо персонажа точно такого же размера. Длинный коридор с каменными колоннами на заднем плане эффектно растягивается и углубляется из-за сильного искажения оптической перспективы. Чистая архитектура, непрерывный единый кадр.
Запрос 2: Продолжите видео. Камера выполняет быстрый механический резкий зум прямо в широко раскрытые глаза персонажа. Стилизованное кинематографичное управление камерой.
Запрос 3: Продолжите видео. Время полностью замирает в неподвижном мгновении: персонаж, его развевающееся на ветру пальто. Камера выполняет плавное высокоскоростное круговое вращение на 360 градусов вокруг застывшего персонажа, демонстрируя выразительную трёхмерную глубину и параллакс среди колоннады. Безупречная непрерывность.
Запрос 1: Мужчина в синем свитере отвечает: «Твой отец тоже вышел в море на лодке?»
Запрос 2: Камера непрерывно отдаляется, пока он продолжает свой рассказ: «Он обычно говорил, что у этой гавани есть душа. И что лодки — часть нас». Музыка нарастает.
Запрос 1: Он прямо смотрит в камеру и рассказывает, чем закончится последняя глава!
Запрос 2: Затем он встаёт, обходит стол и подходит к камере, говоря: «Что бы выбрали вы?»
Вот как можно продлевать сцену с помощью Gemini API:
from google import genai
client = genai.Client()
interaction = client.interactions.create(
model="gemini-omni-1.1-flash",
previous_interaction_id=previous_video_interaction.id,
input=[
{"type": "text", "text": "Continue the scene."}
],
response_format={
"resolution": "360p",
},
)Указывайте первый и последний кадры
Создавайте плавные переходы и движения камеры, указывая начальный и конечный кадры сцены. Omni 1.1 генерирует непрерывное видео между двумя ключевыми кадрами, что делает модель идеальной для сложных круговых движений камеры, переходов с изменением масштаба или плавно зацикленных клипов.
Запрос 1: Крупный план снизу на стильного барабанщика в бежевом костюме, играющего на красной ударной установке в просторном зале; затем камера резко панорамирует в сторону, открывая пожилого саксофониста, играющего рядом с балериной, вращающейся в белом наряде под мягким фиолетовым сценическим светом. Один непрерывный кадр, без склеек.
Запрос 2: Камера приближает изображение на экране телевизора, где мы видим ту же женщину и ту же сцену, что и в начале. Плавное видео. Один непрерывный кадр, без склеек.
Эффективнее создавайте черновые видео в разрешении 360p
Создавайте облегчённые предварительные просмотры в разрешении 360p до на 60% быстрее* и за треть стоимости по сравнению со стандартным разрешением Omni 1.1 720p. Это полезно для быстрого прототипирования, итераций раскадровки и быстрой визуализации на платформах для разработчиков.
*До 60% более высокая скорость генерации на основе пропускной способности системы при разрешении 360p по сравнению с 720p
Запрос: Микроскопический вид переливающихся морских диатомей, демонстрирующих замысловатые кремниевые оболочки, похожие на стекло, с захватывающей дух природной симметрией. Цвета варьируются от глубокого вулканического янтарного и тёплого медного до яркого бирюзового и фиолетового, воспроизводя богатую палитру земли и океана. Крошечные нежные структуры мягко светятся на чистом тёмном фоне. Научная визуализация высокой точности, чёткие детали, органические текстуры, микрофотография. Сохраняйте эффект линзы микроскопа на протяжении всего видео.
Масштабируйте до разрешения 4K
Создавайте обработанные изображения высокого разрешения в формате 1080p или 4K, готовые для профессионального производства с Omni 1.1.
Запрос 1: Рыба плывёт, съёмка с сопровождением
Запрос 2: Маленький бурундук выскакивает из леса с левой стороны экрана и с любопытством принюхивается, прежде чем скрыться за правым краем кадра
Запрос 3: Кинематографичный макрокрупный план ярких золотисто-оранжевых листьев японского клёна на тонкой ветке; листья мягко шелестят и покачиваются в лёгком ритмичном осеннем ветерке. Солнечный свет проникает сквозь полупрозрачную листву, создавая тёплый сияющий эффект. Малая глубина резкости, мечтательный фон с боке, гипердетализированные текстуры, фотореализм, 4K.
Добавляйте видео в мультимодальный ввод в качестве референсов
Используйте до трёх секунд видео в качестве референса при создании сцены, чтобы сохранять визуальный контекст и согласованность персонажей на основе видеореференсов.
Запрос: Используйте три загруженных видео с танцорами и замените их предоставленными персонажами. Пусть они исполняют свои танцы из референсных видео все вместе в большом открытом пространстве с предоставленного изображения.
Персонаж-собака dog.png должен исполнять классический танец из dance3.mp4. Персонаж-осьминог octo.png должен исполнять хип-хоп-танец из dance1.mp4, а медведь bear.png — брейкданс из dance2.mp4. Итог должен представлять собой один непрерывный кадр без смены сцен.
Вдохновляющие идеи для ваших проектов
Вот несколько идей, демонстрирующих, как разработчики могут применять эти новые возможности в пользовательских инструментах и творческих рабочих процессах.
В этом приложении можно добавить первый и последний кадры и сгенерировать переход между ними с помощью готовых пресетов или поля для запроса: благодаря рассуждению Omni по всему контексту вы получаете движения камеры, которые выглядят реалистично.
Это приложение перемещает камеру между комнатами. Она описывает дуги, приближается и отдаляется. Приложение показывает дом в идеальном состоянии и при идеальном освещении. Оно не добавляет мебель или детали, которых не существует.
Создатели уже генерируют несколько видео, прежде чем находят подходящее. Draft Room делает этот процесс поиска дешёвым и структурированным: генерируйте 3–4 варианта черновика в разрешении 360p, изменяя каждый раз только один параметр, и сравнивайте их бок о бок.
Узнайте, как клиенты используют Omni Flash в производстве
Наши клиенты уже применяют Gemini Omni Flash для реальных производственных задач через API Agent Platform. Ознакомьтесь с созданными ими видео и узнайте ниже, как они используют модель.
Adobe интегрировала Gemini Omni Flash в Adobe Firefly. Посмотрите это видео, демонстрирующее возможности редактирования видео.
«Gemini Omni Flash — одна из самых сильных моделей для работы с видео, доступных в Figma Weave, где холст помогает творческим командам развивать каждую генерацию: прикреплять референсы, создавать разные версии и формировать что-то уникальное. Благодаря расширениям, более содержательным референсным материалам и разрешению 4K Gemini Omni Flash выводит команды за пределы простой генерации видео — к настоящей режиссуре». — Итай Шифф, креативный директор Figma Weave.
«В GMI Cloud мы предоставляем создателям централизованный доступ к самым мощным моделям в мире. В Gemini Omni Flash особенно выделяется точность: детали выдерживают тщательную проверку. Для клиентов, создающих образовательный и разъяснительный контент, где правильность имеет первостепенное значение, эта надёжность важнее любой отдельной функции. Omni сделала видео с использованием ИИ доступным для сегмента, который раньше не мог на неё рассчитывать». — Луиза Гуо, вице-президент по маркетингу GMI Cloud.
«Omni Flash естественно вписывается в то, как люди уже используют Runway: начать с запроса, изображения или видео, а затем продолжить генерацию или редактирование. Это ещё один способ, позволяющий нашим пользователям быстро переходить от одной идеи к другой». — Джейми Амперсон, директор по творческим вопросам Runway.
Создавайте проекты с Gemini Omni 1.1 Flash уже сегодня
Таблица цен на Gemini Omni 1.1 Flash.
Omni 1.1 становится доступной во всей экосистеме Google для разработчиков:
- Начните создавать в Google AI Studio: попробуйте Omni 1.1 непосредственно в Google AI Studio.
- Развёртывайте на Gemini Enterprise Agent Platform: корпоративные разработчики могут развёртывать Omni 1.1 на Gemini Enterprise Agent Platform.
- Изучите документацию для разработчиков: ознакомьтесь с официальной документацией, сборником рецептов и руководствами по составлению запросов, чтобы узнать, как интегрировать в свои приложения продление сцен, видеореференсы и масштабирование.
С сегодняшнего дня Omni 1.1 также доступна всем подписчикам Google AI Plus, Pro и Ultra по всему миру в Google Flow. Продление сцен доступно всем подписчикам Google AI Plus, Pro и Ultra по всему миру в приложении Gemini.
Переведено автоматически с английского. Оригинал статьи — по ссылке ниже.