梦晨 克雷西 发自 凹非寺

量子位 | 公众号 QbitAI
Sora要被集成在Adobe视频剪辑软件里了。
在最新发布的Premier Pro概念演示里,Adobe展示了与OpenAI合作的探索成果:
在主镜头之外,完全由Sora生成一段B-roll辅助镜头。
除了Sora之外,其他流行AI视频工具RunwayPika也将作为可选项。
其中Runway在演示中与Sora用法类似,可以生成一段全新的辅助镜头。
Pika则可以做到将现有镜头自然延伸数秒。
需要强调的是,这些功能还处于早期预览和研究阶段,尚未透露何时发布。
与之相比,由Adobe自己的AI产品Firefly支持的功能确定性更强一些。
专业剪辑师无需离开Premiere Pro,就能轻松在视频中添加和删除物体,以及在时间轴上扩展素材
今年之内,视频剪辑工作流将正式进入AI时代。

演示拆解

Adobe这次的宣传片,主要展示了三大“功能”。
首先是向视频的局部添加对象,加入新的物体。
视频画面中,男人缓步走向女人,随后女人转身打开了一个放在汽车后备箱上的手提箱。
定睛细看,箱子里装着的是一些零散的钻石。
只要点击“添加物体”按钮,然后选择目标区域,输入提示词,原本只有少数的钻石,数量便增多了,填满了整个箱子。
并且后续画面也都发生了相应的改变,随着镜头的轻微移动,钻石也随之自然变化,完全看不出有破绽。
除了这样的“加法”,“减法”操作——删除视频中的已有物体——Premier也会做。
在智能魔法棒的加持之下,只需一点就能自动识别出整个物体,而不像是普通的魔法棒只能选择颜色相近的区域。
识别完成后,也只需一键就能完成物体的消除,相应区域的背景也会自动补全。
墙上的展板、地上的物体,都能一键去除,看不出有东西曾经存在的痕迹。
在一“加”一“减”之间,物体的替换也随之实现。
视频里的男人换上了一块新的手表,能够跟随手腕移动,视频里的其他部分则没有受到影响。
能够一键实现这些效果,确实十分强大,不过这种瞄准局部细节的操作,但更厉害的,还有视频扩展
当你发现时间线中还有所空缺,又不知道该放些什么素材时,Premiere可以直接生成内容来填补这块空白,只需一点一拖即可完成。
效果上看,可以说是无缝衔接。
最关键之处在于,所有AI生成结果对原始素材都不是破坏性的
随时可以回滚到初始版本,或在不同AI模型结果直接切换。
此外Adobe还提供了“内容凭证”功能,所有由Premiere Pro制作的视频都将清楚地表明是否使用了、以及使用了哪种AI技术。
以上种种功能尚未确定发布日期,除了将在今年内发布之外,没有透露更多信息。
另外,Adobe创意专业应用产品营销副总裁Deepa Subramaniam表示,Adobe尚未解决使用第三方AI工具所产生的收入将如何在Adobe和合作伙伴之间分配的问题。
为了训练自己的AI视频模型,Adobe正在从摄影师和艺术家手里购买视频片段。
包括表现人们日常活动、以及表达各种情绪的短片,每分钟支付2.62-7.25美元
通过这种方式,Adobe Firefly将确保AI生成内容是可安全商用的。
最后,附上完整演示视频。
参考链接:

[1]
https://www.youtube.com/watch?v=6de4akFiNYM
[2]https://blog.adobe.com/en/publish/2024/04/15/bringing-gen-ai-to-video-editing-workflows-adobe-premiere-pro
倒计时1天 ⏰
4月17日,中国AIGC产业峰会
只需一天,感受AIGC新应用正在引领的科技新范式!
来自产品、技术、投资等领域最主流的“玩家”代表和投资人,将在4月17日中国AIGC产业峰会,与你共同探讨AIGC正在重塑的新世界。
峰会将全程线上下同步直播,欢迎预约直播 ⬇️
点这里👇关注我,记得标星噢
一键三连「分享」、「点赞」和「在看」
科技前沿进展日日相见 ~ 
继续阅读
阅读原文