Adobe 正在为其 Firefly 系列开发生成式 AI 视频模型,该模型将为其 Premiere Pro 视频编辑平台带来新工具。这些新的 Firefly 工具,以及一些与 Runway、Pika Labs 和 OpenAI 的 Sora 模型的第三方集成,将允许 Premiere Pro 用户使用文本提示生成视频并添加或删除对象(就像 Photoshop 的生成填充功能一样),并延长视频剪辑的长度。

与Firefly相关的公告不同的是,该公司的新视频生成工具没有确定发布日期(测试版或其他),只是说它们将在“今年”推出。虽然这家创意软件巨头在早期的视频演示中展示了自己的视频模型目前的能力,但其将 Premiere Pro 与其他提供商的 AI 模型集成的计划并不确定。

Adobe对其新的Firefly生成式AI视频模型的视频演示截图。

首先来看一下演示视频:

通过演示来看,在使用PR编辑视频的时候,我们只需开启视频生成插件,选择其中一种工具生成的短视频,可以直接导入到时间轴的任意位置。

从Adobe发布的演示画面可以看出,用户可以选择open AI旗下的Sora模型完成视频生成,或者使用Firefly模型生成高质量具备商业性的短视频。

用户在视频剪辑的过程中,可以点击右上角的【generate】选项使用pencil铅笔工具,选定视频素材中需要修改的局部区域。然后选择默认的Firefly模型,在对话框中输入提示词,即可替换视频中的元素。此外,
用户还可以点击左侧的魔法工具,选中视频中需要移除的物体,点击【remove】按钮即可消除多余的物体。

对于一些持续长度不足的视频片段。用户可以选择左侧的智能延伸功能。Firefly会在参考视频的基础上,延伸当前片段。除了自带的Firefly模型,用户还可以使用第三方视频模型完成内容生成。

由此看来,Adobe在其视频预览中称第三方AI集成是对这些“未来多媒体软件”可能是什么样子的“早期探索”。根据Adobe的说法,这个想法是为Premiere Pro用户提供更多选择,允许他们在为他们的项目生成使用时使用Pika等模型来扩展镜头或Sora或Runway AI。Adobe还表示,其内容凭据标签可以应用于这些生成的剪辑,以确定哪些AI模型用于生成它们。

Adobe对其新的Firefly生成式AI视频模型的视频演示截图。

不过,与第三方人工智能公司建立合作伙伴关系的举动似乎是显而易见的,无论它有多远。我们从 OpenAI 的 Sora 中看到,似乎让其他产品望而却步——比 Adobe 对其即将推出的 Firefly 视频模型的早期预览要好得多。

与此同时,Adobe相对于竞争对手的主要优势在于在其软件生态系统中构建了自己的Firefly模型,这些模型已经被创意专业人士广泛使用。

在应用程序内集成第三方 AI 模型会是一件带来无限可能和创造灵感的事。​无论是对于 Adobe 还是对于创意专业人士来说,大家都期待AI视频在未来的发展。

分类: AI学习

0 条评论

发表回复

您的电子邮箱地址不会被公开。 必填项已用 * 标注