Adobe最近宣布在Premiere Pro中引入生成式AI功能,它引入了Generative Extend来延长视频长度、添加和删除对象以及基于AI的智能遮罩和跟踪工具、Generative B-Roll以及对第三方AI的支持例如OpenAI和Pika。
由于它似乎与OpenAI的Sora模型兼容,因此Premiere很可能用于使用视频生成而不是视频编辑进行预可视化。
Adobe Firefly视频模型和第三方生成AI模型
当然,这一愿景需要先进的视频人工智能模型,相信这一领域的快速研究和创新将在明年带来专业级的成果。除了已经发布的FireflyImage、Vector、Design和Text Effects模型之外,Adobe还在开发新的Firefly视频模型。
Premiere Pro多年来拥有丰富的合作伙伴和插件生态系统,使其成为适用于任何工作流程的灵活且可扩展的工具。为了扩展这个生态系统,还将分享我们将第三方生成式AI工具和模型引入Premiere Pro的早期探索,包括OpenAI的Sora、RunwayML和Pika。
生成扩展
需要更多的框架吗?没问题。使用生成扩展工具可以在剪辑的开头或结尾生成全新的帧,从而使镜头稍微更长一些。可以使用额外的媒体来微调您的编辑,按住镜头以添加节拍,甚至添加一些帧来覆盖过渡。只需单击并拖动即可进行完美编辑。
添加和删除对象
新的基于人工智能的智能遮罩和跟踪工具使选择随时间移动的对象变得比以往更容易、更快捷。结合对象添加和对象删除工具来替换镜头中的移动对象,删除不必要的物品,例如吊杆麦克风或杂散的咖啡杯,或者将对象添加到绘画或桌子上的逼真花瓶中,可以快速添加布景。
生成B-roll
消除从库存素材中搜索B卷镜头的麻烦,并使用简单的文本提示生成适合你的故事的视频剪辑,创建镜头来说明困难或奇幻的概念,创建难以获得的B-roll,或创建占位符以帮助计划和节奏。
交付人工智能模型的开放方法
随着在快速发展的生成人工智能世界中不断创新,我们致力于开放平台和合作伙伴关系,为客户提供他们想要的功能,随时随地。通过与OpenAI和Pika等公司的早期探索,客户将能够为他们的用例选择正确的模型。这就是为什么我们通过内容凭证来努力实现透明度,内容凭证就像内容创建的营养标签,因此消费者始终知道使用什么模型来创建他们正在观看的媒体。Premiere Pro中支持内容凭据,有助于创建从创建到编辑再到发布的信任链。
人工智能有能力显着提高生产力并降低新媒体工作的障碍,我们相信创造力是人类独有的特质,我们很高兴能够继续与创意社区对话,因为我们通过Premiere Pro迎来了生成式AI时代。