Wan3.0 від Alibaba генерує AI-відео тривалістю до 30 секунд із тексту, зображень і документів
Модель Alibaba для генерації відео Wan3.0 тепер доступна в бета-версії. Вона створює відео тривалістю до 30 секунд і приймає як вхідні дані текст, PDF-файли, вебсторінки та файли PowerPoint.
Це вдвічі збільшує тривалість відео порівняно з її попередницею — Wan2.5. Модель також рекомендує найкращу тривалість відео на основі запиту користувача й містить інструмент розширення, який дає змогу подовжувати наявні відео.
Wan3.0 одночасно обробляє текст, зображення, відео та аудіо. Один запит може містити до десяти зображень, п’яти відео та п’яти аудіокліпів. Вебсторінки й документи, як-от PDF-файли або презентації PowerPoint, також можна використовувати як джерела вхідних даних, перетворюючи статичну інформацію на динамічне відео.
Відео, створені за допомогою ШІ, часто страждають від візуального дрейфу й спотворень, особливо в обличчях та інтерфейсах користувача. За словами Alibaba, Wan3.0 має виправити це, забезпечуючи більшу узгодженість деталей із матеріалами-еталонами, зокрема персонажами, реквізитом і просторовими розкладками.
Wan3.0 доступна через вебсайт wan.video, Alibaba Cloud Model Studio або через API на платформі Qwen Cloud. Є два рівні: версія Standard, на яку наразі діє знижка 30 відсотків, і швидша версія Prime.
| Роздільна здатність | Standard (за сек.) | Prime (за сек.) | 30-секундний кліп (Standard) | 30-секундний кліп (Prime) |
|---|---|---|---|---|
| 480p | $0.05 | $0.068 | $1.50 | $2.04 |
| 720p | $0.10 | $0.14 | $3.00 | $4.20 |
| 1080p | $0.20 | $0.28 | $6.00 | $8.40 |
Alibaba націлює Wan3.0 на все: від кіновиробництва до навчання роботів
Alibaba позиціонує Wan3.0 як інструмент для широкого спектра застосувань — від прискорення кіновиробництва до створення коротких драм і кліпів для соціальних мереж контент-мейкерами. Компанії могли б перетворювати текст і зображення на маркетингові та навчальні відео, а розробники технологій — використовувати модель для створення реалістичних симуляційних відеоматеріалів для навчання автономних транспортних засобів і роботизованих систем.
Запуск відбувається на тлі нарощування Alibaba витрат на ШІ. Компанія щойно оголосила про найбільший продаж акцій компанією, зареєстрованою на біржі Гонконгу, щоб профінансувати свій розвиток у сфері ШІ, а минулого тижня повідомила про падіння квартального прибутку на 75 відсотків у річному обчисленні через різке збільшення інвестицій у ШІ.
Новини про ШІ без зайвого галасу — відібрані людьми
Підпишіться на THE DECODER, щоб читати матеріали без реклами, отримувати щотижневу розсилку новин про ШІ, наш ексклюзивний шість разів на рік звіт про передові технології «AI Radar», повний доступ до архіву та доступ до розділу коментарів.
Перекладено автоматично з англійської. Оригінал статті — за посиланням нижче.