• Американский разработчик программного обеспечения Adobe заявил, что допускает внедрение сторонних генеративных ИИ-инструментов в свой программный продукт для видеомонтажа.
  • Adobe также сообщила, что сторонние генеративные ИИ-плагины для сторонних программ, таких как OpenAI, Lika Labs и Runway, продолжат использоваться в Premiere Pro.
  • Добавление объектов, удаление объектов, генеративное расширение и преобразование текста в видео будут доступны в Premiere Pro в этом году.

Adobe объявила о намерении добавить возможности генеративного ИИ в Premiere Pro позднее в этом году. Новые инструменты будут основаны на модели ИИ Firefly от Adobe и на партнёрствах с некоторыми популярными ИИ-компаниями, такими как OpenAI, Pika Labs и Runway.

Модель ИИ Firefly от Adobe

Новые видеофункции Firefly будут включать возможность добавлять или удалять объекты из видеоклипа с помощью команд на естественном языке. Пользователи также смогут продлевать длительность видеоклипов, прося модель ИИ сгенерировать дополнительный семантически согласованный контент.

Все видео, созданные с помощью этих инструментов, будут автоматически помечаться идентификаторами контента Adobe, что обеспечивает прозрачность в отношении частей, созданных ИИ.

Читайте также:Инструмент клонирования голоса OpenAI имитирует ваш голос по 15-секундному образцу

Три функции модели ИИ Firefly

Добавление и удаление объектов, генеративное расширение и преобразование текста в видео появятся в Premiere Pro в этом году.

Добавление и удаление объектов: просто выберите и отслеживайте объекты, а затем замените их. Это можно использовать для изменения цвета одежды или даже добавления в видеоклип ранее не существовавших изображений. Кроме того, в некоторых случаях, когда фоновые элементы мешают клипу, этот инструмент позволит удалить мешающие объекты.

Генеративное расширение: плавно добавляйте кадры для удлинения клипов, что упрощает точную подгонку времени монтажа и добавление плавных переходов.

Текст в видео: создавайте совершенно новые последовательности прямо в Premiere Pro. Просто введите текст в запрос или загрузите референсные изображения.

Сотрудничество с другими ИИ-компаниями

Помимо модели ИИ Firefly, Adobe также заявила в понедельник, что разрабатывает способ, позволяющий пользователям создавать и использовать видео в Premiere Pro с помощью сторонних инструментов OpenAI и стартапов Runway и Pika Labs.

OpenAI представила свою модель Sora, которая генерирует реалистичные видео по текстовым подсказкам, но пока не сделала технологию публичной и не назвала сроки её доступности.

Deepa Subramaniam, вице-президент по маркетингу продуктов для креативных профессиональных приложений Adobe, заявила: «Мы рады исследовать мир, в котором у вас может быть больше выбора помимо этого благодаря сторонним моделям».