ChatGPT 人工智能 GPT4 伦理 生成式 医疗 监管 安全 机器学习 深度学习 神经网络 计算机视觉 强化学习 模型 算法 应用 开发 研究 工具 平台 框架 数据集 训练 部署 安全 合规 培训 投资 LLM,llm AI,ai,Ai 大模型 大语言模型 制图 生图 绘图 文生图 文生视频 生成式AI AGI 世界模型 sora chatGPT,chatgpt,ChatGpt claude openai Llama deepseek midjourney 红熊猫模型 Red panda,panda Stable Diffusion,StableDiffusion,stable DALL- E 3 DALL E DALL Flux,flux 扩散模型 混元大模型 文心一言 通义千问 可灵 Pika PixelDance 豆包 月之暗面 零一万物 阶跃星辰 搜索增强 MiniMax Talkie Agent prompt fastai LangChain TTS 微调 提示词 知识库 智能体
# 热门搜索 #
搜索
Sora进驻Adobe视频编辑软件!新版Premiere Pro开启AI剪辑时代
6895点击    2024-04-16 21:05

Sora要被集成在Adobe视频剪辑软件里了。


在最新发布的Premier Pro概念演示里,Adobe展示了与OpenAI合作的探索成果:


在主镜头之外,完全由Sora生成一段B-roll辅助镜头。



除了Sora之外,其他流行AI视频工具RunwayPika也将作为可选项。


其中Runway在演示中与Sora用法类似,可以生成一段全新的辅助镜头。



Pika则可以做到将现有镜头自然延伸数秒。



需要强调的是,这些功能还处于早期预览和研究阶段,尚未透露何时发布。


与之相比,由Adobe自己的AI产品Firefly支持的功能确定性更强一些。


专业剪辑师无需离开Premiere Pro,就能轻松在视频中添加和删除物体,以及在时间轴上扩展素材



今年之内,视频剪辑工作流将正式进入AI时代。



演示拆解


Adobe这次的宣传片,主要展示了三大“功能”。


首先是向视频的局部添加对象,加入新的物体。


视频画面中,男人缓步走向女人,随后女人转身打开了一个放在汽车后备箱上的手提箱。



定睛细看,箱子里装着的是一些零散的钻石。



只要点击“添加物体”按钮,然后选择目标区域,输入提示词,原本只有少数的钻石,数量便增多了,填满了整个箱子。



并且后续画面也都发生了相应的改变,随着镜头的轻微移动,钻石也随之自然变化,完全看不出有破绽。



除了这样的“加法”,“减法”操作——删除视频中的已有物体——Premier也会做。


在智能魔法棒的加持之下,只需一点就能自动识别出整个物体,而不像是普通的魔法棒只能选择颜色相近的区域。


识别完成后,也只需一键就能完成物体的消除,相应区域的背景也会自动补全。



墙上的展板、地上的物体,都能一键去除,看不出有东西曾经存在的痕迹。



在一“加”一“减”之间,物体的替换也随之实现。


视频里的男人换上了一块新的手表,能够跟随手腕移动,视频里的其他部分则没有受到影响。



能够一键实现这些效果,确实十分强大,不过这种瞄准局部细节的操作,但更厉害的,还有视频扩展


当你发现时间线中还有所空缺,又不知道该放些什么素材时,Premiere可以直接生成内容来填补这块空白,只需一点一拖即可完成。


效果上看,可以说是无缝衔接。



最关键之处在于,所有AI生成结果对原始素材都不是破坏性的


随时可以回滚到初始版本,或在不同AI模型结果直接切换。


此外Adobe还提供了“内容凭证”功能,所有由Premiere Pro制作的视频都将清楚地表明是否使用了、以及使用了哪种AI技术。



以上种种功能尚未确定发布日期,除了将在今年内发布之外,没有透露更多信息。


另外,Adobe创意专业应用产品营销副总裁Deepa Subramaniam表示,Adobe尚未解决使用第三方AI工具所产生的收入将如何在Adobe和合作伙伴之间分配的问题。


为了训练自己的AI视频模型,Adobe正在从摄影师和艺术家手里购买视频片段。


包括表现人们日常活动、以及表达各种情绪的短片,每分钟支付2.62-7.25美元


通过这种方式,Adobe Firefly将确保AI生成内容是可安全商用的。


文章来自微信公众号”QbitAI",作者 量子位





关键词: sora , Adobe , AI视频 , Premiere Pro , AI剪辑
AITNT资源拓展
根据文章内容,系统为您匹配了更有价值的资源信息。内容由AI生成,仅供参考
1
AI工作流

【开源免费】n8n是一个可以自定义工作流的AI项目,它提供了200个工作节点来帮助用户实现工作流的编排。

项目地址:https://github.com/n8n-io/n8n

在线使用:https://n8n.io/(付费)


【开源免费】DB-GPT是一个AI原生数据应用开发框架,它提供开发多模型管理(SMMF)、Text2SQL效果优化、RAG框架以及优化、Multi-Agents框架协作、AWEL(智能体工作流编排)等多种技术能力,让围绕数据库构建大模型应用更简单、更方便。

项目地址:https://github.com/eosphoros-ai/DB-GPT?tab=readme-ov-file



【开源免费】VectorVein是一个不需要任何编程基础,任何人都能用的AI工作流编辑工具。你可以将复杂的工作分解成多个步骤,并通过VectorVein固定并让AI依次完成。VectorVein是字节coze的平替产品。

项目地址:https://github.com/AndersonBY/vector-vein?tab=readme-ov-file

在线使用:https://vectorvein.ai/(付费)

2
prompt

【开源免费】LangGPT 是一个通过结构化和模板化的方法,编写高质量的AI提示词的开源项目。它可以让任何非专业的用户轻松创建高水平的提示词,进而高质量的帮助用户通过AI解决问题。

项目地址:https://github.com/langgptai/LangGPT/blob/main/README_zh.md

在线使用:https://kimi.moonshot.cn/kimiplus/conpg00t7lagbbsfqkq0