Wan3.0 от Alibaba генерирует AI-видео длительностью до 30 секунд из текста, изображений и документов
Модель Alibaba для генерации видео Wan3.0 теперь доступна в бета-версии. Она создаёт видео длительностью до 30 секунд и принимает в качестве входных данных текст, PDF-файлы, веб-страницы и файлы PowerPoint.
Это вдвое увеличивает длительность видео по сравнению с её предшественницей, Wan2.5. Модель также рекомендует оптимальную длительность видео на основе запроса пользователя и включает инструмент расширения, позволяющий увеличивать длительность уже существующих видео.
Wan3.0 одновременно обрабатывает текст, изображения, видео и аудио. Один запрос может включать до десяти изображений, пяти видео и пяти аудиоклипов. Веб-страницы и документы, такие как PDF-файлы или презентации PowerPoint, также можно использовать в качестве источников входных данных, превращая статические данные в динамическое видео.
Видео, сгенерированные ИИ, часто страдают от визуального дрейфа и искажений, особенно в изображениях лиц и пользовательских интерфейсов. По словам Alibaba, Wan3.0 призвана решить эту проблему, обеспечивая большую согласованность деталей исходных материалов, таких как персонажи, предметы и пространственные композиции.
Wan3.0 доступна через сайт wan.video, Alibaba Cloud Model Studio или через API в Qwen Cloud. Предусмотрено два уровня: версия Standard, на которую сейчас действует скидка 30 процентов, и более быстрая версия Prime.
| Разрешение | Standard (за сек.) | Prime (за сек.) | 30-секундный клип (Standard) | 30-секундный клип (Prime) |
|---|---|---|---|---|
| 480p | $0.05 | $0.068 | $1.50 | $2.04 |
| 720p | $0.10 | $0.14 | $3.00 | $4.20 |
| 1080p | $0.20 | $0.28 | $6.00 | $8.40 |
Alibaba нацеливает Wan3.0 на всё: от кинопроизводства до обучения робототехнике
Alibaba предлагает использовать Wan3.0 в самых разных целях — от ускорения кинопроизводства до создания коротких драм и роликов для социальных сетей авторами контента. Компании смогут превращать текст и изображения в маркетинговые и обучающие видео, а разработчики технологий — использовать модель для создания реалистичных симуляционных видеоматериалов для обучения автономных транспортных средств и робототехнических систем.
Запуск происходит на фоне увеличения расходов Alibaba на ИИ. Компания только что объявила о крупнейшем размещении акций среди компаний, зарегистрированных на Гонконгской фондовой бирже, чтобы профинансировать развитие ИИ, а на прошлой неделе сообщила о снижении квартальной прибыли на 75 процентов в годовом выражении из-за резкого увеличения инвестиций в ИИ.
Новости об ИИ без шумихи — отобраны людьми
Подпишитесь на THE DECODER и получите чтение без рекламы, еженедельную рассылку об ИИ, эксклюзивный отчёт о передовых разработках "AI Radar" шесть раз в год, полный доступ к архиву и доступ к разделу комментариев.
Переведено автоматически с английского. Оригинал статьи — по ссылке ниже.