3300万剪辑师被革命! Sora、Pika、Gen-2将全面登陆Adobe


  新智元报道  

编辑:桃子 好困
【新智元导读】一直想体验Sora的大批网友们早已等不及了。这不,Adobe官宣将在Premiere Pro集成第三方AI视频模型,各种添加移除扩展功能,马上可用了。

还没等OpenAI公开Sora,却等来了Adobe官宣。

一早,Adobe官方称,Sora、Gen-2、Pika等一系列生成式AI工具将在PremierePro推出。

一大批网友激动表示,终于能用上Sora了。

根据官方演示,借助这些AI视频模型,可以在Adobe实现诸多能力。

一位男子走向窗前,正在看整座城市的夜景。

Sora出战后,立即根据文本生成了雨中城市夜景的视频。

同样,Runway的Gen-2模型也可以根据提示,生成以司机角度看夜景的内容。你甚至,可以用Pika模型生成一段连续性视频,接续非常丝滑。除了支持第三方工具,Adobe还发布了一些新功能,比如对象添加、对象移除,以及创意内容AI扩展的能力。Adobe即将到来的新功能向人们展示了,未来使用第三方AI视频生成器的工作流的样子。若是被3300万付费群体所采用,它们将为计算机视频制作流程带来最全面、最革命性的变化。

Sora版PR可能年底上线

不过,第三方AI视频集成何时能够用上,还未知。有网友表示,可能会在今年年底,我们就用上Sora了。Adobe官方称,第三方工具是为了给Premiere Pro用户提供更多的选择,允许他们在为项目生成B-roll时使用Pika或Sora或Runway AI等模型来延展内容。

一键添加移除、扩展

当然,除了能够获取第三方工具,Adobe还为订阅用户提供了自家的视频生成模型。Firefly视频模型同样能够实现「对象检测和移除」的能力,以突出视频中突出显示对象,比如道具、角色、服装、场景等。与此同时,用户还可以将这些对象,编辑成新的内容, 如下所示,将女主的服装颜色更改成卡其色。视频中,还给出了更多关于Adobe平台新能力的演示。替换珠宝收纳箱中的钻石,一圈一选,输入「黑绒内里上铺满了一大堆宝石」,即可得到生成的内容一键替换。想要移除不需要的物体,一步选中就能完成。当然,手表、衣服风格样式改变,Adobe Friely视频模型很轻易就生成了。Friely延续生成,也可以让视频更加流畅自然。前谷歌地图负责人表示,「这对创意人员来说非常棒,因为要利用AI视频模型做任何引人注目的事情,都需要将它们引入视频编辑工具」。

低价购买视频,训练模型


几天前,Adobe因训练模型数据来源,陷入了全网非议之中。彭博称,Firefly AI工具是在Midjourney图像上完成训练。根据一个详细的文件报道,Adobe以每分3美元购买视频片段,用于训练新的AI视频模型。Adobe希望能够创建出与Sora一样,接受文本,再输出长达60秒的视频内容。具体来说,Adobe向艺术家在线征集视频片段,并给出120美元报酬的承诺。他们需要100+个短片,内容需要包括人类表现出的各种情绪、完成不同的身体活动,或者与物品进行互动。此前,Adobe曾向艺术家提供的图片,每张支付了大约6-16美分的报酬,以训练AI文生图模型。

Acrobat AI助手发布,起价4.99美元/月

除此之外,Adobe还发布了一个帮助用户解读文档的AI助手,订阅费每月起价4.99美元。具体来说,Adobe AI助手可以通过聊天机器人界面在Acrobat中回答用户关于PDF和其他文档的问题,并能够定位特定信息、生成摘要并提供文本中的引用。同步上线的还有支持语音指令的免费移动版本,并且可以通过Microsoft Edge和Google Chrome的浏览器插件访问。目前,4.99刀只是初期体验价,预计在未来还将有所调整。参考资料:https://blog.adobe.com/en/publish/2024/04/15/bringing-gen-ai-to-video-editing-workflows-adobe-premiere-pro



相关推荐

  • 国产大模型问鼎AIGC第一股!连续2年盈利,营收10个亿
  • 危险!请马上停止使用JWT!!!
  • 一键收藏!京东零售技术近期精选文章|文末有福利
  • 今日代码大赏 | Java 实现归并排序算法
  • 离开大厂创业一年,从未受过这么大的打击!
  • 倒计时1天|在中国AIGC产业峰会,一天看尽AIGC最新趋势
  • Sora进驻Adobe视频编辑软件!新版Premiere Pro开启AI剪辑时代
  • 北大学生优化清华系大模型,拿ASC全球超算大赛冠军
  • AI换脸以假乱真!蚂蚁数科发布反DeepFake产品,还设百万奖金池邀请黑客找bug
  • 一句话打造Agent!李彦宏:人人都是开发者的时代到来
  • 价值观罗盘:如何让大模型与人类价值观对齐?
  • NAACL 2024 | 阿里提出大语言模型对齐框架Reward Learning on Policy (RLP)
  • 上海期智研究院诚聘人工智能、信息安全、量子智能及相关方向海内外顶尖人才
  • 国产开源物联网操作系统
  • .5.1K Star很不错!一个数据库设计工具
  • 我,年入14.6亿,坚决不融资不上市
  • 分享一篇关于SEO优化的前端知识总结
  • 前端常用的几种请求方式
  • 赛博菩萨Cloudflare
  • 从500ms到3ms,你还在用axios吗?