Sora进驻Adobe视频编辑软件!新版Premiere Pro开启AI剪辑时代

梦晨 克雷西 发自 凹非寺
量子位 | 公众号 QbitAI

Sora要被集成在Adobe视频剪辑软件里了。

在最新发布的Premier Pro概念演示里,Adobe展示了与OpenAI合作的探索成果:

在主镜头之外,完全由Sora生成一段B-roll辅助镜头。

除了Sora之外,其他流行AI视频工具RunwayPika也将作为可选项。

其中Runway在演示中与Sora用法类似,可以生成一段全新的辅助镜头。

Pika则可以做到将现有镜头自然延伸数秒。

需要强调的是,这些功能还处于早期预览和研究阶段,尚未透露何时发布。

与之相比,由Adobe自己的AI产品Firefly支持的功能确定性更强一些。

专业剪辑师无需离开Premiere Pro,就能轻松在视频中添加和删除物体,以及在时间轴上扩展素材

今年之内,视频剪辑工作流将正式进入AI时代。

演示拆解

Adobe这次的宣传片,主要展示了三大“功能”。

首先是向视频的局部添加对象,加入新的物体。

视频画面中,男人缓步走向女人,随后女人转身打开了一个放在汽车后备箱上的手提箱。

定睛细看,箱子里装着的是一些零散的钻石。

只要点击“添加物体”按钮,然后选择目标区域,输入提示词,原本只有少数的钻石,数量便增多了,填满了整个箱子。

并且后续画面也都发生了相应的改变,随着镜头的轻微移动,钻石也随之自然变化,完全看不出有破绽。

除了这样的“加法”,“减法”操作——删除视频中的已有物体——Premier也会做。

在智能魔法棒的加持之下,只需一点就能自动识别出整个物体,而不像是普通的魔法棒只能选择颜色相近的区域。

识别完成后,也只需一键就能完成物体的消除,相应区域的背景也会自动补全。

墙上的展板、地上的物体,都能一键去除,看不出有东西曾经存在的痕迹。

在一“加”一“减”之间,物体的替换也随之实现。

视频里的男人换上了一块新的手表,能够跟随手腕移动,视频里的其他部分则没有受到影响。

能够一键实现这些效果,确实十分强大,不过这种瞄准局部细节的操作,但更厉害的,还有视频扩展

当你发现时间线中还有所空缺,又不知道该放些什么素材时,Premiere可以直接生成内容来填补这块空白,只需一点一拖即可完成。

效果上看,可以说是无缝衔接。

最关键之处在于,所有AI生成结果对原始素材都不是破坏性的

随时可以回滚到初始版本,或在不同AI模型结果直接切换。

此外Adobe还提供了“内容凭证”功能,所有由Premiere Pro制作的视频都将清楚地表明是否使用了、以及使用了哪种AI技术。

以上种种功能尚未确定发布日期,除了将在今年内发布之外,没有透露更多信息。

另外,Adobe创意专业应用产品营销副总裁Deepa Subramaniam表示,Adobe尚未解决使用第三方AI工具所产生的收入将如何在Adobe和合作伙伴之间分配的问题。

为了训练自己的AI视频模型,Adobe正在从摄影师和艺术家手里购买视频片段。

包括表现人们日常活动、以及表达各种情绪的短片,每分钟支付2.62-7.25美元

通过这种方式,Adobe Firefly将确保AI生成内容是可安全商用的。

最后,附上完整演示视频。

参考链接:
[1]
https://www.youtube.com/watch?v=6de4akFiNYM
[2]https://blog.adobe.com/en/publish/2024/04/15/bringing-gen-ai-to-video-editing-workflows-adobe-premiere-pro

倒计时1天 ⏰

4月17日,中国AIGC产业峰会

只需一天,感受AIGC新应用正在引领的科技新范式!

来自产品、技术、投资等领域最主流的“玩家”代表和投资人,将在4月17日中国AIGC产业峰会,与你共同探讨AIGC正在重塑的新世界。

峰会将全程线上下同步直播,欢迎预约直播 ⬇️


点这里👇关注我,记得标星噢

一键三连「分享」、「点赞」和「在看」

科技前沿进展日日相见 ~ 

相关推荐

  • 北大学生优化清华系大模型,拿ASC全球超算大赛冠军
  • AI换脸以假乱真!蚂蚁数科发布反DeepFake产品,还设百万奖金池邀请黑客找bug
  • 一句话打造Agent!李彦宏:人人都是开发者的时代到来
  • 价值观罗盘:如何让大模型与人类价值观对齐?
  • NAACL 2024 | 阿里提出大语言模型对齐框架Reward Learning on Policy (RLP)
  • 上海期智研究院诚聘人工智能、信息安全、量子智能及相关方向海内外顶尖人才
  • 国产开源物联网操作系统
  • .5.1K Star很不错!一个数据库设计工具
  • 我,年入14.6亿,坚决不融资不上市
  • 分享一篇关于SEO优化的前端知识总结
  • 前端常用的几种请求方式
  • 赛博菩萨Cloudflare
  • 从500ms到3ms,你还在用axios吗?
  • 华为自用的时序数据库开源啦,来看看水平怎么样?
  • 云开源公司成“恶龙”?——指控Linux基金会旗下开源项目盗用代码
  • 刘强东 AI 数字人将开启直播;淘宝上线苹果Vision Pro;特斯拉高级副总裁宣布离职 | 极客头条
  • 李彦宏:开源模型会越来越落后,自然语言将成为新的通用编程语言
  • 好多人啊!OceanBase 开发者大会·2024全议程公布
  • 两家知名云服务商遭诈骗 350 万美元,黑客挖矿赚取 100 万美元后被抓!
  • 4个令人惊艳的开源项目,诞生了!