流媒体AI故事Netflix版：开源AI视频技术引热议，“AI野心”浮出水面

流媒体的AI故事怎么讲

近期，由 Netflix提供支持的Eyeline Studios和几所知名大学的研究团队开源了视频生成技术Go-with-the-Flow。

这是一种用于控制视频扩散模型中的运动模式的新技术。这项研究成果可以让动画制作像拖拽App一样简单。该技术可能引发创作革命，但也引发滥用和失业担忧。

因为众所周知的原因，Netflix在AI议题上的表态一向比较克制，但通过此举，也基本可以一窥Netflix在生成式AI领域的布局节奏和思路了。

奈飞“下场”AI视频技术，一拖一拽就能制作动画

最近，Netflix和几所知名大学的研究团队抛出的成果，让整个创意圈都沸腾了。

来自 Netflix Eyeline Studios、Netflix、马里兰大学和斯坦福大学等的研究人员提出了一种新方法，用于加强视频扩散模型中的运动控制。这个名为"噪声扭曲算法"的研究成果，实际上就是让用户可以像拖拽手机App一样制作动画。

这一方法引入了结构化潜噪声采样技术，通过预处理训练视频来生成结构化噪声，从而改变视频生成方式。

与现有方法不同的是，该技术无需修改模型架构或训练管道，因此可适用于不同的扩散模型。这种创新方法为运动控制提供了一种解决方案，包括局部物体运动、全局摄像机运动和运动转移，并提高了时间一致性和每帧像素质量。

用户只需通过剪切和拖动，就能决定场景中物体的移动方式。它还可以控制摄像机，甚至将运动从一个视频转移到另一个视频。

Netflix 偶尔使用 AI 艺术已经招致了批评，它敏锐地指出，Netflix 并没有创建自己的 AI 图像生成器。Netflix表示，该项目是 “持续研究的一部分，旨在开发艺术家拥有创意控制权和利用视频传播模式的方法。这项技术目前还处于研究阶段，暂时还没有应用于任何生产用途"。

Netflix 此前曾宣布，它正致力于使用生成式人工智能制作游戏。

去年下半年，狮门影业（Lionsgate）已经宣布与Runway开发定制的人工智能视频模型合作。外界预期，AI公司已经撕开了好莱坞合作的口子。

关键角色：奈飞支持的Eyeline Studios，从虚拟制作到创新中心

Eyeline Studios 于 2020 年由德国视觉特效公司Scanline VFX 成立，旨在专注于虚拟制作和体积捕捉技术。这使得 Scanline VFX 能够在虚拟制作领域拓展其业务范围。

2021年11月，Netflix 宣布收购位于慕尼黑的视觉效果工作室 Scanline VFX。Scanline 曾参与制作多部 Netflix 原创作品，包括《怪奇物语》和《星际牛仔》。该工作室还为许多漫威和 DC 作品提供特效。

Scanline 成立于 1989 年，在温哥华、蒙特利尔、洛杉矶、伦敦、慕尼黑、斯图加特和首尔设有办事处。在 Netflix 之外，该工作室还为《权力的游戏》、《黑寡妇》、《黑豹》、《惊奇队长》、《钢铁侠 3》、《扎克·施奈德的正义联盟》、《小丑》等提供特效。

收购之时，时任Netflix工作室运营副总裁Amy Reinhard当时曾在一篇博客文章中概述了 Netflix 计划投资 Scanline 的管线、基础设施和员工队伍，并“继续支持 Scanline 的 Eyeline Studios 在虚拟制作方面所做的工作，以突破视觉可能性的界限。”

Eyeline Studios 的创建是 Scanline VFX 在数字制作和虚拟制作方面的进一步扩展。Scanline VFX 希望借助 Eyeline Studios 在虚拟制作和体积捕捉方面的技术力量，进一步提升其在现代影视特效领域的竞争力。

例如，2020年，Scanline VFX 为制作《曼达洛人》（The Mandalorian）提供了大量的虚拟制作技术支持，该项目成功展示了虚拟制作在电影拍摄中的革命性作用。

收购之后，Eyeline Studios也成为 Netflix 的一部分，进一步加强了 Netflix 在视觉特效和虚拟制作领域的技术能力。

据Eyeline Studios 招聘信息中的介绍，它是 Netflix 及其合作伙伴的创新中心，旨在为创作者提供无与伦比的创意和技术能力，让他们与全球观众分享自己的愿景。该工作室具有战略性优势，可以让电影制作人提前获得最新创新成果，不仅帮助他们实现愿景，还帮助他们塑造这些能力，更好地服务于全球故事讲述者社区。

据海外社区的讨论，早在一年前，Eyeline studios就大举招聘大量生成式AI智能相关的职位。

Netflix AI的潜在布局

2023 年 2 月，Netflix推出 AIGC 动画短片《犬与少年》，被视为积极布局生成式AI的信号。

因为好莱坞对人工智能的争议，Netflix对于AI的发声的发声一直比较克制，比较集中的主要有两次。

2024年7月，Netflix首席技术官Elizabeth Stone曾在访谈中提到，生成式人工智能浪潮是“新技术的一步”，Netflix 正在探索如何将其集成到产品中以改善会员体验，或者如何“让创作者能够以更好的方式将他们的愿景变为现实”。

值得注意的是，Elizabeth Stone于2023 年 10 月被任命为首席技术官，成为首位担任该头衔的 Netflix 高管。

另一次是在2024年10月的第三季度电话会议上，Netflix联席首席执行官Ted Sarandos表示，人工智能迄今为止的发展情况好坏参半，但它有机会成为娱乐与科技携手合作的最新例子。

“我认为，创作者对这些新工具是什么以及它们能做什么非常好奇，这一点非常重要。但人工智能需要通过一个非常重要的测试：它能帮助制作更好的节目和更好的电影吗？”Ted Sarandos表示。

人工智能至今仍是好莱坞争议话题之一，创意人员对工作室可能会使用人工智能取代背景演员、起草平庸的剧本并支付更少的人工、作家来重新创作剧本以及寻找其他偷工减料的方法的想法感到恐惧。这也正是Netflix在这个问题上谨慎行事的原因。

据外媒信息，通过分析近半年的 Netflix 招聘信息，可以发现Netflix 正在探索在整个组织内使用大模型 和生成式 AI 模型来完成从实时字幕和个性化到内容制作等各种任务。而更为重要的是，Netflix 的计划或包括构建一个可在整个公司范围内使用的内部 AI 平台，以构建生成式 AI 应用程序。

文章来自于“东西文娱”，作者“东西文娱”。