今天小编分享的科学经验:Sora进驻Adobe视频编辑軟體!新版Premiere Pro开启AI剪辑时代,欢迎阅读。
Sora 要被集成在 Adobe 视频剪辑軟體里了。
在最新发布的 Premier Pro 概念演示里,Adobe 展示了与 OpenAI 合作的探索成果:
在主镜头之外,完全由 Sora 生成一段 B-roll 辅助镜头。
除了 Sora 之外,其他流行 AI 视频工具Runway和Pika也将作为可选项。
其中 Runway 在演示中与 Sora 用法类似,可以生成一段全新的辅助镜头。
Pika 则可以做到将现有镜头自然延伸数秒。
需要强调的是,这些功能还处于早期预览和研究阶段,尚未透露何时发布。
与之相比,由 Adobe 自己的 AI 产品Firefly支持的功能确定性更强一些。
专业剪辑师无需离开 Premiere Pro,就能轻松在视频中添加和删除物体,以及在时间轴上扩展素材。
今年之内,视频剪辑工作流将正式进入 AI 时代。
Adobe 这次的宣传片,主要展示了三大 " 功能 "。
首先是向视频的局部添加对象,加入新的物体。
视频画面中,男人缓步走向女人,随后女人转身打开了一个放在汽车備份箱上的手提箱。
定睛细看,箱子里装着的是一些零散的钻石。
只要点击 " 添加物体 " 按钮,然后选择目标区網域,输入提示词,原本只有少数的钻石,数量便增多了,填满了整个箱子。
并且后续画面也都发生了相应的改变,随着镜头的轻微移动,钻石也随之自然变化,完全看不出有破绽。
除了这样的 " 加法 "," 减法 " 操作——删除视频中的已有物体—— Premier 也会做。
在智能魔法棒的加持之下,只需一点就能自动识别出整个物体,而不像是普通的魔法棒只能选择颜色相近的区網域。
识别完成后,也只需一键就能完成物体的消除,相应区網域的背景也会自动补全。
墙上的展板、地上的物体,都能一键去除,看不出有东西曾经存在的痕迹。
在一 " 加 " 一 " 减 " 之间,物体的替换也随之实现。
视频里的男人换上了一块新的手表,能够跟随手腕移动,视频里的其他部分则没有受到影响。
能够一键实现这些效果,确实十分强大,不过这种瞄准局部细节的操作,但更厉害的,还有视频扩展。
当你发现时间线中还有所空缺,又不知道该放些什么素材时,Premiere 可以直接生成内容来填补这块空白,只需一点一拖即可完成。
效果上看,可以说是无缝衔接。
最关键之处在于,所有 AI 生成结果对原始素材都不是破坏性的。
随时可以回滚到初始版本,或在不同 AI 模型结果直接切换。
此外 Adobe 还提供了 " 内容凭证 " 功能,所有由 Premiere Pro 制作的视频都将清楚地表明是否使用了、以及使用了哪种 AI 技术。
以上种种功能尚未确定发布日期,除了将在今年内发布之外,没有透露更多信息。
另外,Adobe 创意专业应用产品营销副总裁 Deepa Subramaniam 表示,Adobe 尚未解决使用第三方 AI 工具所产生的收入将如何在 Adobe 和合作伙伴之间分配的问题。
为了训练自己的 AI 视频模型,Adobe 正在从摄影师和艺术家手里购买视频片段。
包括表现人们日常活动、以及表达各种情绪的短片,每分钟支付 2.62-7.25 美元。
通过这种方式,Adobe Firefly 将确保 AI 生成内容是可安全商用的。
最后,附上完整演示视频。
参考链接:
[ 1 ] https://www.youtube.com/watch?v=6de4akFiNYM
[ 2 ] https://blog.adobe.com/en/publish/2024/04/15/bringing-gen-ai-to-video-editing-workflows-adobe-premiere-pro