《赛博朋克2077》里的NPC,已经会和玩家对话了?
还是根据玩家说的话实时响应,不用背剧本的那种?
在CES 2024的活动上,英伟达展示了利用Avatar Cloud Engine (ACE)技术打造的最新成果。
在ACE的加持之下,游戏中的人物纷纷“活”了起来,与其他角色甚至真人玩家一起对话交流,并根据对话内容做出动作。
而至于对话质量,网友评价说,离控制主角还有些差距,但是如果用于驱动配角的话,效果已经很好了。
这样的游戏场景由英伟达开发者平台的合作者Convai打造,其创始人兼CEO Purnendu Mukherjee曾在英伟达担任高级工程师。
Convai是一个主要面向游戏开发者的数字人平台,提供了语音识别/合成、语言理解与生成等AI对话服务。
它支持包括中英文在内的多种语言,兼容Unity、Unreal Engine等主流游戏引擎,人们可以利用它创建真实的游戏角色。
这些角色可以像真人一样交谈、回答问题和互动,并具有丰富的情感和个性。
伴随着ACE等一系列重磅成果在CES上公布,英伟达的股价也创新高,盘后交易结束后达到了每股527美元。
那么,由英伟达AI控制的NPC,到底都能说些什么呢?
英伟达高级产品经理Seth Schneider(游戏中叫Kai)展示了他与《赛博朋克2077》NPC对话过程。
在走进这家面馆之前,AI控制的男店员Jin和女顾客Nova已经在攀谈了。
而且他们讨论的内容正是关于AI,Nova还说除了没有血肉之外他们已经很真实了。
接着,Nova看到了“迎面而来”的Kai,他们已经很久没见面了,Nova他是不是在躲着自己。
Kai赶紧解释到,自己并没有躲着Nova,只是最近太忙了,然后询问起了Nova的近况。
Nova说自己很好,并且最近刚和一家公司签下了一笔大单,接着镜头转向了Jin……
Kai向Jin重复了Nova成功签单的消息,并提议庆祝一下。
Jin也同意Kai的想法,不过也说不要期待着每次都能像这样成功。
除了和玩家对话,NPC还会根据对话的内容做出相应的动作,比如在Kai提出庆祝之后拿出酒杯。
随着对话的进行,Nova提到了自己正在秘密的GPU上研究一种新的游戏技术,但不能在这里详细讨论,可以到实验室里看看。
Kai立马回答说自己很想去一探究竟,结果Nova爽快地答应,然后做出了起身的动作……
另外据介绍,玩家每次进入游戏时,NPC都会谈论不同的内容,摆脱了剧本的束缚。
而这段视频所利用的,正是英伟达的ACE技术。
ACE是英伟达提出的生成式AI解决方案,可以帮助开发者在游戏中构建包含语音、对话和动画的AI模型。
ACE最早去年3月亮相,在这次的CES上终于宣布已开放给了部分开发商。
具体来说,这次英伟达开放试用的是针对NVIDIA Riva和NVIDIA Audio2Face这两个模块的ACE微服务。
Riva是一款基于神经网络的语音处理系统,支持语音识别/合成和基于神经网络的翻译,为玩家和NPC的对话提供了支持。
Audio2Face则会根据对话内容调控NPC的口型和面部表情,使其对话场景更为真实。
这一消息宣布后,马上就有多家游戏公司响应,比如育碧就宣布将会利用英伟达的AI工具来构建游戏角色。
国内方面,腾讯、网易、米哈游等游戏大厂也纷纷宣布将会跟进。
那么,你期待和AI打造的游戏角色一起玩耍吗?
视频地址:
https://www.youtube.com/watch?v=psrXGPh80UM
参考链接:
[1]https://blogs.nvidia.com/blog/ces-2024/
[2]https://www.shacknews.com/article/138201/nvidia-convai-ai-npc-ces-2024
[3]https://decrypt.co/212025/ubisoft-nvidia-ai-tools-npc-chat-characters
【开源免费】Fay开源数字人框架是一个AI数字人项目,该项目可以帮你实现“线上线下的数字人销售员”,
“一个人机交互的数字人助理”或者是一个一个可以自主决策、主动联系管理员的智能体数字人。
项目地址:https://github.com/xszyou/Fay
【开源免费】VideoChat是一个开源数字人实时对话,该项目支持支持语音输入和实时对话,数字人形象可自定义等功能,首次对话延迟低至3s。
项目地址:https://github.com/Henry-23/VideoChat
在线体验:https://www.modelscope.cn/studios/AI-ModelScope/video_chat
【开源免费】Streamer-Sales 销冠是一个AI直播卖货大模型。该模型具备AI生成直播文案,生成数字人形象进行直播,并通过RAG技术对现有数据进行寻找后实时回答用户问题等AI直播卖货的所有功能。
项目地址:https://github.com/PeterH0323/Streamer-Sales