再小众的赛道,也能靠AI捞到第一桶金。
前段时间,UGC内容平台Roblox玩家“RG”使用Tripo生成的一顶粉色贝雷帽,在1小时内吸引了超3000名玩家涌入Tripo。“RG”也靠售卖游戏配饰赚到了超过1亿Robux(Roblox内的代币,折合约35万美元,近250万元人民币)。
X平台上专门有博主分享相关UGC内容,为游戏提供3D装饰品
据“AI新榜”观察,在TikTok、Roblox等内容平台上,已经有不少通过AI 3D内容赚一波的创作者。
TikTok创作者“mermelada”“ohenzi”用3D模型做成的“AI PokeMon”视频获得了百万级播放,完全可以直接导入到游戏画面中使用。
通常来说,大部分玩家会先使用AI 3D工具基础建模,再导入Blender、Comfy等工具中进行细节优化。
比起之前3D模型仅仅是批量生产“手办”的玩具,现如今,这一技术在TikTok、Instagram上深受创作者的青睐,AI 3D内容已经可以在平台出售,帮助创作者们获得收入。
除此之外,上半年亚马逊商城推出了“Virtual Try-On”的3D功能,支持商家上传自己的物品3D模型,以此提高商品成交率。
亚马逊官方表示,超过9成的消费者认为3D商品会影响自己的购物决策。也因此,电商领域对3D生成内容的应用,同样成为了一个可行的商业化方向。
在AI的助力下,3D建模也进入了快车道。那么,AI生成3D内容,可以完成到什么程度了?普通玩家也可以打造自己的3D内容资产吗?创作者们通常用3D内容做些什么?
涉及3D内容的部分,我们观察到大多数都提到了Tripo AI这款工具。Tripo AI是由3D大模型公司VAST今年年初推出的3D内容生成工具。
前段时间,Tripo AI更新了自己的3D模型2.0版本,支持文生和图生3D,生成时间缩短至10秒以内。
近期,利用Tripo AI打造的AI 3D内容中,最受欢迎的一条视频播放量超7000万,点赞破27万。
我们以上述案例中出现频次较高的Tripo AI为例,在Tripo AI的网页端(https://www.tripo3d.ai/app),点击“Get Start”,即可创建属于自己的3D内容。
Tripo AI目前提供文生3D和图生3D两种玩法,每生成一次都需要花费60积分,不过,每位用户每月会获赠600积分,对于想要尝鲜的玩家来说较为友好。
首先,我们从文生3D模型测起。Tripo AI官方表示,更新后的2.0版本,生成一个3D模型并完成渲染控制在10秒内。
比如,我们输入“塞尔达公主”作为关键词,发现Tripo会实时给出模型预览版。
点击生成,Tripo会根据提示词一次生成4个3D模型,来看看效果:
这一步中,我们可以选择其中一个细节、纹理都比较满意的模型,进一步改变风格、角度和模拟动作。
可以看到,AI塞尔达公主五官清晰,没有出现“歪脸”的情况。
相比几个月前我们复刻测试的3D模型,现在的AI 3D建模在画质表现、清晰度以及复杂结构上都有了明显提升。
上图为今年年初使用Luma AI生成的塞尔达公主;下图为Tripo AI生成的模型
另外,我们还可以给生成的3D模型绑定骨骼,让她做一些诸如行走、翻滚、跑步等动作。
测试下来我们发现,人物的骨骼加持效果好于动物角色。我们生成的3D猫猫,想让它模拟T台走秀,尝试过几次它的腿部还是会出现“粘连”的状况。
和文生3D相比,图生3D的玩法更多是让创作者将平面设计转换成3D模型。这里只需要上传一张设计图,就可以让Tripo自动生成模型。
实测下来,目前的AI 3D技术能够让用户获得基础的立体模型,但涉及跑步、翻滚等动态效果时,Tripo的模型就会出现一定瑕疵,模块和模块之间无法清楚分割。
不过,对于没有其他工具基础的玩家来说,这已经能够建立起属于自己的3D资产。
这阵子,AI 3D赛道也迎来了一波“流量增长”,生成内容席卷了X平台。
比如,马斯克理想中的“星际飞船”:
还渗透到了教育领域,用AI完成3D绘本的制作:
更多玩家使用AI来制作虚拟手办:
还有一些更复杂、更精妙的玩法。比如,“toyxyz”利用Tripo生成角色动画,再用“img2img”工具进行风格化转绘,联动可灵和LivePortrait让静态模型动起来。
这里使用AI 3D建模的原因在于,比起PS等平面,创作者们在3D环境下可以更自由地来创建不同的场景、光影和角度。
不得不说,AI美女都变得更灵动了:
当然,AI 3D还可以让创作者更自由地创建不同的场景、环境和视野。比如,X博主“Yokohara_h”用Tripo AI模拟建造了一个小镇。
目前,Tripo AI的Discord平台已经拥有超3万的关注者。
有意思的是,今年年初刚推出自己第一版3D生成模型的Tripo,还曾因为用户增长过快,收到过Discord官方的警告。
Tripo AI首席营销官Sienna接受采访时表示,从5月份开始,Tripo用户比例增长得非常快,大多数都来自《我的世界》和Roblox玩家,他们需要定制一些独特的虚拟物品,所以开始尝试用Tripo进行设计。
尽管目前游戏中的主角、场景依旧需要精度更高、更复杂的模型,但在短视频、游戏配件领域,AI 3D内容已经有了用武之地。
Tripo AI使用门槛低,创作者们可以轻松一键模拟出想象中的场景。这也是为什么越来越多的玩家开始用AI 3D工具进行UGC创作的原因。
Tripo AI创始人宋亚宸认为,当3D大模型技术发展一定程度时,一定会催生出一个以3D内容为主的UGC平台,这也是Tripo团队长期的愿景——“做一个什么都能分享的3D抖音”。
大厂和初创公司们看中的是,AI 3D应用能否真正帮助用户提效赚钱,产品就有机会实现商业化。也因此,在3D大模型赛道涌现了不少玩家。
近期,Readyverse联合《头号玩家》团队,发布了一款文本生成3D模型环境的工具“Promptopia”。
今年7月,Meta AI发布了文生3D模型“3D Gen”,能够在1分钟内生成高质量的3D内容。
同月,腾讯元宝也宣布进军3D生成应用领域,上线了“3D角色梦工厂”的玩法,一张图即可生成3D角色。
大厂之外,初创公司方面,Meshy、VAST、Wonder Studio等玩家先后发布了文字/图像生成3D的AI模型。
我们可以看到,一款代表时代的产品,恰恰反映了当下最热门的技术。对于AI赛道来说,“下一个抖音”里承载着一部分人对3D生成内容的想象。
不过,和大语言模型、AI生图、生视频赛道不同的是,3D生成赛道很“卷”,但却没有一个真正意义上出圈的现象级产品。
虽然大多数3D大模型公司在生成速度和质量上不断突破,但仍面临如何真正融入内容消费者生活和应用场景的难题。
AI 3D生成之所以特殊,主要在于其技术复杂性,对数据的需求量大,应用场景又非常多元。和2D内容相比,3D生成在VR、AR等场景下更强调用户的沉浸感和交互性。
正如李飞飞所言,“我们生活在一个三维世界中,AI只有突破对3D世界的理解和生成,才能真正追赶上人类智能。”
真正的下一个挑战,是将这些AI技术带入到我们的物理生活场景中,实现AI与真实世界的无缝对接和交互。
这或许是3D生成赛道,未来能够实现爆发性增长的关键所在。
文章来自于微信公众号“帅小伙爱科学”,作者“阿虎”
【开源免费】LGM是一个AI建模的项目,它可以将你上传的平面图片,变成一个3D的模型。
项目地址:https://github.com/3DTopia/LGM?tab=readme-ov-file
在线使用:https://replicate.com/camenduru/lgm
【开源免费】LivePortrait项目可以实现高效的人像动画,通过拼接和重定向控制技术,使一个静态人像或动物图像能够变成动态的视频,变成动画形式。
项目地址:https://github.com/KwaiVGI/LivePortrait?tab=readme-ov-file
【开源免费】LangGPT 是一个通过结构化和模板化的方法,编写高质量的AI提示词的开源项目。它可以让任何非专业的用户轻松创建高水平的提示词,进而高质量的帮助用户通过AI解决问题。
项目地址:https://github.com/langgptai/LangGPT/blob/main/README_zh.md
在线使用:https://kimi.moonshot.cn/kimiplus/conpg00t7lagbbsfqkq0