• 美国软件制造商 Adobe 表示,它将允许第三方生成式人工智能工具进入其视频编辑软件业务领域。
  • Adobe 还表示,针对 OpenAI、Lika Labs 和 Runway 等第三方程序的第三方生成式 AI 插件将在 Premiere Pro 中继续使用。
  • 今年,Premiere Pro 将迎来对象添加、对象移除、生成式扩展以及文本转视频功能。

Adobe 已宣布计划在今年晚些时候为 Premiere Pro 添加生成式 AI 功能。这些新工具将基于 Adobe 的 Firefly AI 模型,并与 OpenAI、Pika Labs 和 Runway 等一些知名 AI 公司建立合作。

Adobe 的 Firefly AI 模型

全新的 Firefly 视频功能将包括使用自然语言提示在视频剪辑中添加或移除对象的能力。用户还可以通过提示 AI 模型生成更多语义一致的内容来延长视频剪辑的长度。

通过这些工具生成的所有视频都将自动添加 Adobe 的内容凭证(Content Credentials),以提供透明度,显示哪些部分是由 AI 生成的。

另请阅读:OpenAI 语音克隆工具仅需 15 秒样本即可模仿你的声音

Firefly AI 模型的三大功能

今年,Premiere Pro 将新增对象添加、对象移除、生成式扩展和文本转视频功能。

对象添加与移除:只需选中并跟踪对象,然后替换它们。这可以用来改变衣服的颜色,甚至向视频剪辑中添加之前不存在的图像。此外,在某些情况下,背景中的物体会使剪辑显得杂乱,但此工具将允许人们移除分散注意力的对象。

生成式扩展:无缝添加帧以使剪辑更长,从而更容易完美调整编辑时间并添加平滑转场。

文本转视频:直接在 Premiere Pro 中生成全新的视频片段。只需在提示框中输入文字或上传参考图像即可。

与其他 AI 公司的合作

除了 Firefly AI 模型外,Adobe 还在周一表示,它正在开发一种方式,让用户可以在 Premiere Pro 中使用来自 OpenAI 以及初创公司 Runway 和 Pika Labs 的第三方工具来生成和使用视频。

OpenAI 已经展示了其 Sora 模型,该模型可以根据文本提示生成逼真的视频,但尚未公开该技术或提供可用的时间表。

Adobe 创意专业应用产品营销副总裁 Deepa Subramaniam 表示:“我们很高兴能够探索一个世界,在那里你可以通过第三方模型拥有更多选择。”