Adobe 让我们一窥 AI 将如何使 Premiere Pro 更进化

coolgame • 2024年4月16日 16:30 • 投稿

去年，Adobe 推出了以先前的 SenseiAI 架构为基础的最新生成式 AI 模型 Firefly，而现在该公司在一个短片中展示了它将如何被应用到旗下的视频编辑软件 Premiere Pro。这包括了一些将在今年稍晚推出的关键功能，包括添加与移除对象、生成式扩展以及文字转视频等能力。

如果真如展示的那么神奇的话，这些新功能应该会相当受欢迎，因为视频后制是常见（且令人头痛）的工作。首先生成扩展解决了剪辑人员常常遇到的问题：素材太短。 Adobe 表示：「（这功能将）无缝添加影格以加长素材，使其更容易符合需求，并让过渡更平滑。」它自然是使用生成式 AI 来达成这功能了。

另一个常见问题是不想出现在画面中的物体，取决于背景的复杂度，去除它们可能同样可能很棘手;又或者你想将画面中的某些东西移除，换成你想要的其他物件。这时候 Premiere Pro 将推出的「对象添加与移除」就可望解决了这个问题。它同样使用了 Firefly 的生成式 AI，「只需选择并追踪物体，再替换它们就可以了。移除碍眼的物品、更改演员的衣装或快速添加布景装饰，例如墙上的画作或桌上逼真的花朵 Adobe 如此写道。

Adobe 展示了一些范例，例如通过由 Firefly 生成的文字提示，将一堆钻石添加到行李箱中。它还可以移除难看的工具箱、更换手表表盘以及为角色添加领带等。

Adobe 还展示了导入自定义 AI 模型的方法。其中之一名为 Pika，也可以提供类似「生成扩展」的延长功能;而另一个可以自动生成 B-Roll 视频素材的，就是大名顶顶的 Sora 了。它让你可以直接在软件内生成全新的素材：「只需输入视频的文字描述或上传参考图片。这些短片可用于构思分镜脚本，或用于创建 B-Roll 以补充真实世界拍摄的素材“。也就是说，Adobe 虽然很快就将 Sora 商业化，但目前还不认为它能直接生成「正片」，主要还是以辅助为主。但 Sora 推出也还没几个月，照 AI 目前的发展速度，接下来会到什么地步还真不好说呢。

最后，Adobe 称将为这类 AI 加工过的镜头添加「内容凭证」，这样您就可以看到哪些是由 AI 生成的内容，包括该 AI 模型背后的公司。

这些功能将在今年晚些时候推出，但 Adobe 也预计将在 5 月份向所有用户推出更新，内容包括交互式的淡入淡出控制，使过渡更轻松;用 AI 为音频自动标记类别（「AI 会自动将音频标记为对话、音乐、音效或环境音，并为其添加图标，以便剪辑人员使用」）;以及重新设计过的时间轴音轨波形图等。