一块4090搞定实时视频生成！Adobe黑科技来了
一块4090搞定实时视频生成！Adobe黑科技来了游戏直播等实时渲染门槛要被击穿了？Adobe 的一项新研究带来新的可能。
来自主题: AI技术研报
5577 点击 2025-06-10 16:52
# 热门搜索 #
大模型
人工智能
openai
融资
chatGPT
游戏直播等实时渲染门槛要被击穿了？Adobe 的一项新研究带来新的可能。
在人与AI高度协同的时代，只有大量复杂UI界面的应用将会被淘汰。
设计软件提供商 Canva 公司推出创意 AI 产品，加强其生成式人工智能服务，试图在迈向首次公开募股之际，从竞争对手 Adobe 公司那里吸引企业客户。
论文第一作者为余鑫，香港大学三年级博士生，通讯作者为香港大学齐晓娟教授。主要研究方向为生成模型及其在图像和 3D 中的应用，发表计算机视觉和图形学顶级会议期刊论文数十篇，论文数次获得 Oral, Spotlight 和 Best Paper Honorable Mention 等荣誉。此项研究工作为作者于 Adobe Research 的实习期间完成。
在当今数字产品设计领域，动画已不再是锦上添花，而是提升用户体验的关键要素。然而，对于大多数设计师来说，创建高质量的交互动画一直是一项挑战 —— 传统动画工具如 Adobe After Effects 或 Rive 不仅学习曲线陡峭，而且价格不菲。
论文一作刘少腾，Adobe Research实习生，香港中文大学博士生（DV Lab），师从贾佳亚教授。主要研究方向是多模态大模型和生成模型，包含图像视频的生成、理解与编辑。作者Tianyu Wang、Soo Ye Kim等均为Adobe Research Scientist。
本文中，香港大学与 Adobe 联合提出名为 UniReal 的全新图像编辑与生成范式。该方法将多种图像任务统一到视频生成框架中，通过将不同类别和数量的输入/输出图像建模为视频帧，从大规模真实视频数据中学习属性、姿态、光照等多种变化规律，从而实现高保真的生成效果。
AI生成视频，边生成边实时播放，再不用等了！ Adobe与MIT联手推出自回归实时视频生成技术——CausVid。
尽管近期 Qwen2-VL 和 InternVL-2.0 的出现将开源多模态大模型的 SOTA 提升到了新高度，但巨大的计算开销限制了其在很多场景下的应用。
今年拿了腾讯 Al Lab(青云计划”), 字节跳动(Seed) 的 offer, 国外有之前实习的 Sony Research 和 Yamaha 的 return offer, 也有正在面试的 Adobe 和 Meta。 这些工作机会的方向都和我的博士工作完全 match, 没有转方向的痛苦。最后, 我接了字节 Seed 团队的 offer, 结束秋招。