Adobe випустила рішення для генерації відео на основі тексту та зображень, зробивши його доступним для всіх охочих у режимі публічної бети.
Generate Video відтепер можна знайти в оновленому вебзастосунку Firefly поряд із новими можливостями генерації зображень і функцією перекладу, а також новими тарифними планами з AI-кредитами для авторів. Про це повідомляє The Verge.
Компанія Adobe почала інтегрувати інструменти на базі Firefly Video Model ще в жовтні. Тоді з’явився бета-інструмент Generative Extend у Premiere Pro, що може розширювати відео на початку або наприкінці. Теперішнє розгортання Generate Video (через понад 2 місяці після запуску аналогічного інструмента Sora від OpenAI) містить низку незначних вдосконалень порівняно з версією, анонсованою у вересні.
Як працює Generate Video
Generate Video складається із таких основних можливостей:
1. Text-to-Video: генерація відео на основі текстових описів.
2. Image-to-Video: можливість додати референс-зображення на додачу до тексту. Так система отримує точку старту для майбутнього відеоматеріалу.
Користувач може налаштовувати кілька параметрів, щоб керувати стилем, кутами зйомки, типом руху та дистанцією зйомки у віртуальному середовищі.
- Дозвіл відео: 1080p (раніше було лише 720p).
- Фреймрейт: 24 кадри на секунду.
- Тривалість: до 5 секунд (для порівняння, Sora підтримує 20 секунд).
- Час генерування: приблизно 90 секунд або довше.
Adobe заявляє, що працює також над швидшою низькороздільною версією (ideation model) і над моделлю 4K, які будуть доступні найближчим часом.
Оновлення Firefly Web App
- Інструменти Generate Video з’явилися в редизайн-версії вебзастосунку Firefly.
- Є покращена інтеграція із продуктами Creative Cloud (Photoshop, Premiere Pro, Express), що спрощує подальше редагування та перенесення згенерованих матеріалів.
- Оскільки Firefly проходить навчання на доменах із відкритими ліцензіями та публічним контентом, результати можна використовувати в комерційних цілях без ризику порушення авторських прав. Adobe позиціює Generate Video як готовий до виробництва інструмент для професіоналів, які створюють відео і не хочуть ризикувати із правами інтелектуальної власності.
Додаткові інструменти та нові підписки
З 12 лютого на платформі Firefly також можна випробувати дві нові функції (у публічній бета-версії), однак вони не безкоштовні.
- Scene to Image: створення 3D- або скетч-референсів для генерації зображень (імовірно, це продовження експерименту Project Scenic, анонсованого Adobe у жовтні).
- Translate Audio and Video: переклад/дублювання аудіо більш ніж 20 мовами зі збереженням голосу оригінального спікера.
У межах лінійки Firefly компанія запроваджує нові тарифні плани:
- Firefly Standard (від $9,99 за місяць): 2000 відео-/аудіокредитів, максимум 20 згенерованих відеокліпів (5 секунд, 1080p).
- Firefly Pro (від $29,99 за місяць): 7000 кредитів, до 70 згенерованих відеокліпів (5 секунд, 1080p).
Обидва плани надають необмежений доступ до функцій створення зображень і векторів.
Конкуренція на ринку ШІ-відео
- Sora від OpenAI офіційно з’явилася у грудні. Зараз Google тестує другу генерацію свого Veo AI Video Model.
- ByteDance і Pika Labs оголосили про власні проєкти з генерації відео за допомогою ШІ.
- Основна перевага Adobe — це надійна комерційна ліцензія Firefly. Втім, у компанії є завдання тримати рівень якості й функціоналу на тлі конкурентів.
Читайте також на ProIT: Apple випускає Final Cut Pro 11 зі ще більшою кількістю функцій.
Підписуйтеся на ProIT у Telegram, щоб не пропустити жодної публікації!
