Adobe Premiere Pro 将支持 AI 视频编辑功能! 可接入 Sora、Runwa 等模型

当前位置:首页>全部工具>AI视频>视频剪辑>Adobe Premiere Pro 将支持 AI 视频编辑功能! 可接入 Sora、Runwa 等模型

Adobe 也宣布将为其旗下的专业视频编辑软件 Premiere Pro 接入一系列生成式 AI 功能,包括添加对象、删除对象、视频内容延长以及根据文本生成视频,为用户提供更便捷精准地视频编辑服务。

Adobe Premiere Pro 将引入生成式 AI 视频并计划集成第三方 AI 模型

Adobe Premiere Pro的AI功能:

1、视频生成Video Generate:

AI 技术目前在视频生成领域有广泛应用,出现了很多成熟的工具,比如 SoraRunwayPikaStable VideoDreamina 等,它们都可以直接通过文本或图像生成动态视频。与此同时,AI 技术在视频编辑方面的应用也越来深入,Runway早就在其视频编辑工具中加入了智能抠图、动态追踪、局部重绘、智能调色的功能,我们熟悉的剪映已经支持智能字幕、音色克隆、视频无痕翻译、数字人等功能。

Adobe Premiere Pro 将支持 AI 视频编辑功能! 可接入 Sora、Runwa 等模型
Runway模型接入
Adobe Premiere Pro 将支持 AI 视频编辑功能! 可接入 Sora、Runwa 等模型
OpenAI的Sora模型接入
Adobe Premiere Pro 将支持 AI 视频编辑功能! 可接入 Sora、Runwa 等模型

尽管 Adob​​e 希望在 Premiere Pro 中支持第三方文本到视频生成模型,但这并不意味着该公司不会构建自己的模型——事实确实如此。 Adobe 解释说,“只需在提示中输入文本或上传参考图像”即可在 Premiere Pro 中生成全新的素材。该公司认为该工具有助于创建故事板、生成 B-roll 剪辑或增强实景镜头。

2、创意扩展Generative Extend

“Generative Extend”是 Adob​​e 计划为 Premiere Pro 带来的最有趣的生成 AI 工具之一。它承诺在剪辑中无缝添加帧以使其更长,从而允许编辑者创建更平滑的过渡。 Adobe 表示,这项“突破性技术”将使剪辑师能够创建额外的媒体以进行微调编辑、保持镜头以获得额外的节拍以及更好的封面过渡。

Adobe Premiere Pro 将支持 AI 视频编辑功能! 可接入 Sora、Runwa 等模型
Adobe Premiere Pro 将支持 AI 视频编辑功能! 可接入 Sora、Runwa 等模型

3、删除对象Remove Object

支持智能识别某个对象并一键将其无痕删除。例如,可以从帧序列中删除不需要的对象、为场景添加布景或更改演员的服装。这种选择是跨帧的,一旦选中后,之后画面中内容都会同样被删除,无需重复操作。这项功能将对影视后期非常有帮助,用户可以轻松去除画面中不需要的人物或者道具,以及一些可能会涉及到侵权的内容。并且删除操作是非破坏性的,支持恢复至原始状态。

Adobe Premiere Pro 将支持 AI 视频编辑功能! 可接入 Sora、Runwa 等模型

4、新增对象Add Object

「新增对象」可以让用户框选视频画面的某个区域,然后结合用提示词来重新生成该部分的内容。从演示视频来看一共支持矩形、椭圆、钢笔三种框选方式,新生成的内容与周围的环境也融合地相当不错。

Adobe Premiere Pro 将支持 AI 视频编辑功能! 可接入 Sora、Runwa 等模型
Adobe Premiere Pro 将支持 AI 视频编辑功能! 可接入 Sora、Runwa 等模型
Adobe Premiere Pro 将支持 AI 视频编辑功能! 可接入 Sora、Runwa 等模型
Adobe Premiere Pro 将支持 AI 视频编辑功能! 可接入 Sora、Runwa 等模型

FireFly模型它支持文生图、图像局部重绘、图像外绘拓展、文生矢量图形、矢量图自动上色、文生设计模板等多种功能,已经被内置到Photoshop、Illustrator 和 Express 软件中。如今 FireFly 又新增了视频生成功能,发展速度令人惊喜。

Adobe Premiere Pro 将支持 AI 视频编辑功能! 可接入 Sora、Runwa 等模型

除了 FireFly 模型,Premiere Pro 还支持接入第三方模型来生成视频,比如用 Pika 来延长视频、用 Sora 或 Runway 生成新的视频片段,给用户更多样的选择,只是不知道是否会额外收费。而且既然 Sora 已经可以提供 API 接口给第三方使用,是不是也离开放测试应该也不远了?

官方称 Premiere Pro 的这些生成式功能会在今年晚些时候上线,因为有 AI 参与到创作流程中,所以 Adobe 将会为生成的内容附加内容凭证,以便人们查看其中 AI 的参与程度以及具体使用的模型,这为维护正常的创作秩序起到了一个很好的的示范作用。

前段时间还有消息称,Adobe 正在每分钟 2.62 美元的价格收购视频资源,以训练自己的文生视频模型,看来 Adobe 也已经正式加入 AI 视频模型的 “军备竞赛” 中了。而付费购买视频资源应该是为了更好地应对 AIGC 一直存在的数据集版权问题,保证 Adobe 服务的用户可以安心的地使用自家模型生成的内容而不用担心会侵权。

Adobe Premiere Pro 将支持 AI 视频编辑功能! 可接入 Sora、Runwa 等模型

Adobe 与竞争对手相比如何讨论和构建生成式 AI 工具,这一点非常有趣。与 OpenAI 和 Stability AI 等公司不同,Adobe 几十年来一直在为创意专业人士提供服务——Adobe 并不是在 AI 大门打开时突然出现的。 Adobe 30多年来一直致力于为视觉艺术家创建工具,这意味着其核心受众并不普遍渴望更具生成性的人工智能技术;许多人担心人工智能可能会损害他们的业务和整个艺术空间。

Adobe 正试图通过创建人工智能驱动的工具来帮助客户,同时又不会削弱其更大的创造力服务。

Adobe 创意产品部高级副总裁 Ashley Still 表示:“Adobe 正在重新构想视频创作和制作工作流程的每一步,为创作者提供新的力量和灵活性来实现他们的愿景。” “通过将生成式 AI 创新深入到 Premiere Pro 核心工作流程中,我们正在解决视频编辑人员每天遇到的真正痛点,同时为他们提供更多空间来专注于自己的技术。”

在剪映、Adobe PremierePro 这些传统视频编辑工具积极拥抱 AI 生成式技术的同时时,新兴的 AI 视频生成工具也在积极拓展它们在视频编辑方面的应用。比如 Pika 目前已经有了视频局部重绘、音效生成、角色唇形一致等功能;

LTX Studio 则正在打造一个全 AI 流程的视频制作平台,从创意构思、视频生成到视频编辑可以一站式完成,未来 AI 肯定会给我们更多新鲜的视频制作体验。

Adobe Premiere Pro 将支持 AI 视频编辑功能! 可接入 Sora、Runwa 等模型
1、山鲸AI所有文章,如无特殊说明或标注,均为本站作者原创发布。
2、任何个人或组织,在未征得作者同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。
3、如若此作者内容侵犯了原著者的合法权益,可联系客服提交工单进行处理。
4、山鲸AI内用户所发表的所有内容及言论仅代表其本人,并不反映任何山鲸AI之意见及观点。
中国风肖像赛博朋克

汉服 x 赛博机甲风兔子女孩

2024-4-22 19:23:42

AI字幕视频剪辑

Captions AI - 迄今为止最智能的视频剪辑AI工具,没有之一!

2024-5-9 1:08:31

!
你也想出现在这里? 立即联系
0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
购物车
优惠劵
今日签到
有新私信 私信列表
搜索
error: 您点击的内容受到保护~