Sora要被集成在Adobe视频剪辑软件里了。
在最新发布的Premier Pro概念演示里,Adobe展示了与OpenAI合作的探索成果:
在主镜头之外,完全由Sora生成一段B-roll辅助镜头。
除了Sora之外,其他流行AI视频工具Runway和Pika也将作为可选项。
其中Runway在演示中与Sora用法类似,可以生成一段全新的辅助镜头。
Pika则可以做到将现有镜头自然延伸数秒。
需要强调的是,这些功能还处于早期预览和研究阶段,尚未透露何时发布。
与之相比,由Adobe自己的AI产品Firefly支持的功能确定性更强一些。
专业剪辑师无需离开Premiere Pro,就能轻松在视频中添加和删除物体,以及在时间轴上扩展素材。
今年之内,视频剪辑工作流将正式进入AI时代。
Adobe这次的宣传片,主要展示了三大“功能”。
首先是向视频的局部添加对象,加入新的物体。
视频画面中,男人缓步走向女人,随后女人转身打开了一个放在汽车后备箱上的手提箱。
定睛细看,箱子里装着的是一些零散的钻石。
只要点击“添加物体”按钮,然后选择目标区域,输入提示词,原本只有少数的钻石,数量便增多了,填满了整个箱子。
并且后续画面也都发生了相应的改变,随着镜头的轻微移动,钻石也随之自然变化,完全看不出有破绽。
除了这样的“加法”,“减法”操作——删除视频中的已有物体——Premier也会做。
在智能魔法棒的加持之下,只需一点就能自动识别出整个物体,而不像是普通的魔法棒只能选择颜色相近的区域。
识别完成后,也只需一键就能完成物体的消除,相应区域的背景也会自动补全。
墙上的展板、地上的物体,都能一键去除,看不出有东西曾经存在的痕迹。
在一“加”一“减”之间,物体的替换也随之实现。
视频里的男人换上了一块新的手表,能够跟随手腕移动,视频里的其他部分则没有受到影响。
能够一键实现这些效果,确实十分强大,不过这种瞄准局部细节的操作,但更厉害的,还有视频扩展。
当你发现时间线中还有所空缺,又不知道该放些什么素材时,Premiere可以直接生成内容来填补这块空白,只需一点一拖即可完成。
效果上看,可以说是无缝衔接。
最关键之处在于,所有AI生成结果对原始素材都不是破坏性的。
随时可以回滚到初始版本,或在不同AI模型结果直接切换。
此外Adobe还提供了“内容凭证”功能,所有由Premiere Pro制作的视频都将清楚地表明是否使用了、以及使用了哪种AI技术。
以上种种功能尚未确定发布日期,除了将在今年内发布之外,没有透露更多信息。
另外,Adobe创意专业应用产品营销副总裁Deepa Subramaniam表示,Adobe尚未解决使用第三方AI工具所产生的收入将如何在Adobe和合作伙伴之间分配的问题。
为了训练自己的AI视频模型,Adobe正在从摄影师和艺术家手里购买视频片段。
包括表现人们日常活动、以及表达各种情绪的短片,每分钟支付2.62-7.25美元。
通过这种方式,Adobe Firefly将确保AI生成内容是可安全商用的。
文章来自微信公众号”QbitAI",作者 量子位
【开源免费】n8n是一个可以自定义工作流的AI项目,它提供了200个工作节点来帮助用户实现工作流的编排。
项目地址:https://github.com/n8n-io/n8n
在线使用:https://n8n.io/(付费)
【开源免费】DB-GPT是一个AI原生数据应用开发框架,它提供开发多模型管理(SMMF)、Text2SQL效果优化、RAG框架以及优化、Multi-Agents框架协作、AWEL(智能体工作流编排)等多种技术能力,让围绕数据库构建大模型应用更简单、更方便。
项目地址:https://github.com/eosphoros-ai/DB-GPT?tab=readme-ov-file
【开源免费】VectorVein是一个不需要任何编程基础,任何人都能用的AI工作流编辑工具。你可以将复杂的工作分解成多个步骤,并通过VectorVein固定并让AI依次完成。VectorVein是字节coze的平替产品。
项目地址:https://github.com/AndersonBY/vector-vein?tab=readme-ov-file
在线使用:https://vectorvein.ai/(付费)
【开源免费】LangGPT 是一个通过结构化和模板化的方法,编写高质量的AI提示词的开源项目。它可以让任何非专业的用户轻松创建高水平的提示词,进而高质量的帮助用户通过AI解决问题。
项目地址:https://github.com/langgptai/LangGPT/blob/main/README_zh.md
在线使用:https://kimi.moonshot.cn/kimiplus/conpg00t7lagbbsfqkq0