Lightricks推出AI电影制作平台LTX Studio。

【导读】Sora还没开放，但网友们用Runway、Pika等工具做出的电影级大片已经「上线」，B站西游记的浏览量快破百万了！另外，Lightricks今天推出的革命性AI电影制作平台LTX Studio，让我们可以亲手DIY电影级大片了。

最近，全网掀起了AI视频热潮。 

各种史诗级大片纷纷出炉，逼真的效果、震撼的场面让网友们震惊到失语。 

比如B站UP主「AI疯人院」的这部2024开篇王炸——AI版西游记动画短片，已经取得了将近百万的播放量。 

网友们纷纷惊呼，开篇就被惊艳到，整个看下来感受就是：简直绝了！ 

而一位名叫Shang Chi的小哥做出的AI电影「怀旧宇航员」，则让无数人落泪，直接入选今年MIT AI电影大赛的最佳影片。 

所以，我们离自己DIY出一部AI大片，到底有多远？ 

虽然，最近爆红的Sora把视频时间延长到了史诗级的60秒，但离一整部电影大片的时长，还是差得远。 

不过，刚刚出炉的一套AI工具，直接把电影制作的整个工作流都给实现了！ 

AI大电影「完整工作流」来了

就在刚刚，以色列初创公司Lightricks正式发布了一款AI驱动的电影生成和剪辑软件——LTX Studio。

只要通过文字，它就能直接生成复杂的剧情，包含语音、音效、视频画面，一整套全包圆了。

联合创始人（从左至右）：Itai Tsiddon、Yaron Inger、Zeev Farbman、Amit Goldstein和Nir Pochter 

它包含的一整套导演工具，直接重新定义了视频制作的工作流！其中包括自动编写脚本工具、调整多镜头的场景控制工具、保证角色一致性的工具、摄像机控制、一键编辑等等。 

这样，我们制作出高质量视频，就更轻松了。 

只要你给出一个初步想法，LTX Studio就能把你的想法可视化。 

比如，现在我们的电影中需要一只因惊讶而放大的瞳孔。 

一个躺在地上的女人。 

一个被水淹了的未来主义房间中的一棵树。 

昏暗走廊中的一个女人。 

一个恶棍。 

根据你输入的prompt，LTX Studio自动为创建出了脚本，分割出众多个镜头。 

比如一个未来主义空间的戏剧场景，它创建出的镜头如下。 

或者，我们需要纽约法庭的场景。 

有了这些分镜头之后，就可以直接让它生成一部电影了！ 

自动生成的故事板，会组织起整个的叙事和场景规划，对角色、摄像机角度都能自定义控制。这种直观的体验，让前期制作和粗剪都更迅速。 

而它生成的画面内容，比如演员、造型、场景，都可以随意剪辑更换。 

比如，刚才生成影片中男人背后的绿车，我们想让它变成红色的，一秒给你改变。 

可以让肌肉女变成肌肉男吗？完全没问题。 

后悔了，还是想让男性角色变回女性？也没问题。 

我们可以把这个场景中女性角色身边的男性换成一个中年黑人，或者一位衣冠楚楚的绅士。 

一个效果炸裂的电影片头怎么设计？它来帮你。 

公司联合创始人兼CEO Zeev Farbman表示，这款产品非常适合电影制作人、前期制作人员和广告公司等专业人士。 

「LTX Studio能够帮助快速构建概念故事，或者在不需要大量投资的情况下，帮助电影制作人评估拍摄场景的不同方案。」 

背后的模型

LTX Studio结合了多种AI技术，涵盖了创作过程中的各个环节。 

其中，公司独创的文生视频模型——LongAnimateDiff，能够创作出帧数在16至64之间的视频。 

此外，团队还发布了另一款专门用于创作32帧视频的模型。与LongAnimateDiff相比，它在视频质量上通常有更出色的表现。 

不过，并不是所有的功能都依赖AI技术。 

对于背景音乐，公司选择了第三方的音乐资产供应商，因为他们认为目前的AI技术还无法创作出符合要求的背景音乐质量。 

一大波真实制作来了！

官方在推特上已经放出了一大波网友制作的视频，并且还分享了背后工作流的样子。 

在赛博朋克的未来城市中，一位赏金猎人的新手之旅意外地将他卷入了一场残酷的城市帮派战争。 

这一切始于他在一次意外中救下了一位黑帮老大的儿子，从而引发了一系列连锁反应。 

如果他想在法律的边缘生存下去，就必须迅速适应这个充满危险和诡计的世界。 

A rookie cyberpunk bounty hunter finds himself at the center of a city gang war after saving a mob bosses son from a rival attack. Gotta learn the rules fast if he wants to survive life on this side of the law. A crime thriller packed with hits, jealousy, and power. 

Marcus，一位身经百战的角斗士，正站在竞技场地下的昏暗房间中，进行最后的检查。 

画面中的短剑是他在无数战斗中的忠实伴侣，每一次的磨砺都是对生死的考验。 

当Marcus踏入竞技场，那刺眼的阳光和滚烫的空气仿佛预示着即将到来的战斗。 

Marcus is a gladiator and in the dimly lit room beneath the arena, he prepares for battle as he checks his gladius for the last time. He steps out into the light, seeing the vast crowd in the scorching sun, he sees his opponent and softly smiles. This day belongs to him. 

在这个因核灾难而变得荒凉的世界里，只有女性存活下来。 

她们佩戴的防毒面具，不仅是在这充满毒素的空气中求生的必需品，更成为了她们反抗绝望、宣示力量的象征。 

在这片满目疮痍的废墟之中，她们为争夺资源、权力以及自由，展开了殊死的斗争。 

In a world scorched by nuclear disaster, where only women survive, they wear gas masks, not just for air, but as a statement. Amidst the ruins, they fight for resources, power, and freedom. In a Mad Max inspired dystopia, witness their stylish resilience. 

在一个奇妙的冒险中，一位8岁的勇敢女孩穿越时空回到了恐龙时代，却意外发现了一个充满神秘的高级文明。 

面对时间的紧迫，她不仅要想方设法修复她的时间机器，还要揭开这个古老文明的秘密，并把这些珍贵的知识带回现代。 

An 8 year old girl travels back in time to see the dinosaurs and discovers an unknown advanced civilization. She must fix her time machine and bring back the secret on the civilization to the present before it's too late. 

国外网友热评十大AI电影

这些天，「AI颠覆好莱坞」的呼声，是越来越猛了。 

随着Sora掀起AI视频的热潮，网友们也纷纷使用各种AI视频工具，做出了自己的电影级大片。 

国外博主Min Choi最近就评选出，全网十个效果最好的DIY电影预告片。 

1 怀旧宇航员

这个AI短片，出自一位叫Shang Chi的网友之手。 

入选了2024年MIT AI电影制作大赛黑客马拉松的最佳影片。 

Shang Chi感叹道：AI是讲故事的终极武器，如果没有伟大的AI社区灵感，自己不可能做出这个片子。 

网友们看完后非常感动，纷纷表示：「感谢你创造了这个美丽的故事。」 

2 真人版高达预告

「Dave Clark」制作的这个高达真人概念预告片，效果好到令人震惊。 

其中用到了Runway的运动笔刷功能。 

3 足球比赛

由「The Classified Football Results」制作的这部片子，是由传奇人物James Alexander Gordon的声音朗读。 

画面和视频由Midjourney和Runway生成。 

4 最终幻想VII重生

这是日本网友「吉川明静」制作的《最终幻想》预告片。 

5 龙与武士

「Shikoba」制作的这个视频，是由Midjourney、PixVerse和Music Soundbay共同完成的。 

6 午夜奥德赛

「Ethereal Gwirl」制作的这部大片，已经在YouTube上正式播出了！ 

本视频由Midjourney、Pika、Runway、Magnific AI、Stable Diffusion和FulljourneyAI共同完成。 

精美的画质，扣人心弦的情节，被网友们评为「史诗级」作品。 

7 Levi's风广告大片

「Paul Montreal」经过全新的构想，对90年代的经典Levi's广告「Creek」进行了再创作。 

使用的工具是Midjourney、Runway、Artlist和Magnific AI。 

在这个过程中应用到了许多电影摄影技术，和视觉叙事艺术。 

8 Absence

这个名为「Absence」的大片，讲述的是一场穿越时空的因果之旅。 

作者「Dustin Hollywood」使用的工具是Midjourney、Runway、Topaz Labs和Magnific AI。 

9 产妇：AI恐怖电影预告片

作者「PZF」表示，自己想创作一些与日常工作完全不同的东西，其次也想提高自己的编辑技能。 

因此他虚构了一部恐怖电影「产妇」（Maternity），做出了60秒的预告片。 

网友们表示，里面的小孩盯着你眼睛的时候，简直毛骨悚然…… 

而作者表示，开始自己并没有打算把视频做得这么暗黑，但他发现了一种十分有效的风格，找到了很合适的配乐，然后就做成了这个样子。 

10 犬之日

作者「Next on Now」表示，每个人都会偶尔需要属于自己的「犬之日」。 

使用的工具是Runway、Midjourney和ElevenLabs。 

自己上手DIY电影大片

看到网友们的这些大片，你是不是也手痒痒了？ 

Runway、Pika之类的工具，大家一定已经玩得很溜了。这里重点介绍下LTX Studio的使用方法。 

正如之前的演示，它使用起来非常简单，很好上手。 

我们只需先输入一段自己的想法，然后LTX Studio就会根据这段prompt创建一个脚本和故事板，以及人物角色。 

其中，故事板会展现分割成众多镜头的不同场景。 

接着，我们可以通过输入指令来变换场景，更改风格（如动画或影视风格）、调整天气设定和更换地点。 

一般而言，每个镜头的长度仅有几秒。 

借助LTX Studio提供的镜头编辑器，我们可以重命名镜头并调整包括视频特效、动作幅度、摄像机的角度/位移、持续时间和角色对白等设置。 

另外，我们还能通过一个独立的角色页签，为整个构想增加、删除或更改角色。或者， 直接上传一张面部清晰可见的图片，来创造角色。 

这个过程中，故事角色的一致性是不需要操心的。 

当用户完成故事线的微调和镜头编辑后，就可以预览电影了。还能导出文件，分享给其他人。 

Waitlist现在就可以申请了，试用是免费的！ 

3月27日发布正式版后，估计就要收费了。 

申请地址：https://ltx.studio/ 

Sora依然无人可挡

而在AI视频领域，如果横向比较的话，现在可以确定的是，Sora依旧无人可挡。 

最近，国外的一位小哥Mickmumpitz，就对比了Sora和Runway Gen-2、AnimateDiff、Pika，以及LeonardoAI的生成效果。 

一句话总结就是，Sora鹤立鸡群。 

接下来是固定考题：根据这幅静图创作视频。 

以下是四个AI视频工具的作品。 

同样的prompt画出的视频，Sora和Runway是这样的。 

Sora和AnimateDiff是这样的。 

Sora和Pika是这样的。 

Sora和LeonardoAI是这样的。 

以下是生成小狗的效果图对比。 

以下是公路汽车的效果对比。 

可以看到，Sora比起其他AI视频工具，性能强大得不是一档。 

简直难以想象，Sora正式上线以后，电影业会被颠覆成什么样。 

参考资料： 

https://www.jpost.com/business-and-innovation/article-789 649 

https://techcrunch.com/2024/02/28/lightricks-announces-ai-powered-filmmaking-studio-to-help-creators-visualize-stories/ 

https://twitter.com/LTXStudio 

https://twitter.com/minchoi/status/1762466367033286885 

https://www.youtube.com/watch?v=A6sAR70Q07Y 

https://www.bilibili.com/video/BV1DS421N7Ph/ 

文章来自于微信公众号“新智元”（ID：AI_era），作者 “新智元”