ChatGPT 人工智能 GPT4 伦理 生成式 医疗 监管 安全 机器学习 深度学习 神经网络 计算机视觉 强化学习 模型 算法 应用 开发 研究 工具 平台 框架 数据集 训练 部署 安全 合规 培训 投资 LLM,llm AI,ai,Ai 大模型 大语言模型 制图 生图 绘图 文生图 文生视频 生成式AI AGI 世界模型 sora chatGPT,chatgpt,ChatGpt claude openai Llama deepseek midjourney 红熊猫模型 Red panda,panda Stable Diffusion,StableDiffusion,stable DALL- E 3 DALL E DALL Flux,flux 扩散模型 混元大模型 文心一言 通义千问 可灵 Pika PixelDance 豆包 月之暗面 零一万物 阶跃星辰 搜索增强 MiniMax Talkie Agent prompt fastai LangChain TTS 微调 提示词 知识库 智能体
# 热门搜索 #
搜索
实测英伟达AI游戏引擎:与NPC实时聊天,中文流畅爆了
3066点击    2024-03-02 14:14

黄院士在《赛博朋克2077》里搞的智能NPC,已经飙起中文了?


量子位的一手体验,亲眼见证了NPC们流利地用中英双语对话,表情动作自然,口型也能对上……


如果不是眼前就有一块屏幕,真的会有种身临其境之感。



今年的CES展会上,英伟达用智能引擎Avatar Cloud Engine (ACE),让游戏NPC“活”了起来,引起了不小的震撼。



CES上展示的智能NPC


通过ACE,不需要事先准备剧本,就能让游戏中的人物像真人一样与玩家语音对话,还有相应的表情和肢体动作。


亮相当时,就有育碧、腾讯、网易、米哈游等国内外游戏大厂纷纷宣布将会跟进。



现在,通过加入翻译模块,游戏里的NPC们也学会了中文。


下面,就跟随量子位的镜头一起来感受一下中文对话版的赛博朋克世界吧~


智能NPC开飙中文


以Kai的身份走进拉面店的时候,迎接我们的依然是店主Jin和朋友Nova。


故事的背景也和CES上展示的DEMO中相同,Nova到拉面店中告诉Jin自己的公司刚签下一笔大单的消息。


我们走到Nova面前,让她帮忙推荐这里最好吃的拉面,Nova毫不犹豫地告诉我们牛肉拉面最好吃。



无论是说的内容还是表情神态都很自然,不过中文的发音有些魔性,但考虑到Nova是个外国人,倒也算是合理。


而当我们表达完感谢之后,Nova直接爽快地向Jin点了一碗面,要请我们吃。



我们推脱说要自己付钱之后,便进入了闲聊的环节,通过对话得知,Nova是这家店的常客。


同时,Nova也再次给我们讲述了她的公司签下大订单这件事。



在对Nova表示完祝贺之后,我们又把目光转向了店主Jin。


话题依然是从拉面开始,Jin给我们推荐了酱油拉面和味增拉面,我们决定各来一碗。


Jin一边答应,一边把做好的拉面端到我们的面前,我们开始借机询问拉面的做法。



虽然Jin没有用中文回答我们的问题,但从他说的话中也能看出,他是理解了我们说的话的。


不过,随着对话的继续进行,Jin开始在中英双语之间反复横跳,但理解始终是没有问题的。


而且,有些时候即使没有100%识别我们说的话,也不影响Jin理解我们想表达的意思。



Jin说的话给我们接下来的交谈提供了新的思路,我们开始顺着Jin的回答来提问。


有意思的是,Jin始终没有忘记自己拉面馆老板的身份,在谈论“新东西”的时候还不忘推销店里的清酒。



仿照CES上的DEMO,我们又问了Jin关于人工智能的看法。


不同的是,Jin在这里并不觉得自己可能是AI,然后打趣说:


就算我是AI,那至少也是个会做拉面的AI,不是吗?

当然,这是这次体验游戏的背景设定使然——在ACE中,可以对人物的性格等信息进行预设,得到不同的回复风格。



一番体验过后,NPC的表现足以让人印象深刻,他们不再是冰冷的背词机器,而是像真人一样“活”了起来。


在这当中,英伟达的ACE平台功不可没。


真·中文NPC不远了?


驱动NPC的引擎主要可以分为三个模块——其中两个来自英伟达ACE平台,一个来自第三方。


具体来说,NVIDIA Riva和NVIDIA Audio2Face这两个模块的ACE微服务,分别负责处理语音和人物表情动作。


具体的对话内容,则由第三方Convai使用大模型生成。



由于Convai只支持英文,所以当我们说中文时,还要经过一步翻译环节,才能送入模型,再把模型返回的英文结果翻译回中文。


这也就解释了为什么会在NPC人物的对话中会出现中英交替的现象。


但ACE平台是开放的,中间负责生成内容的模型并非不可替换;另一方面,国内厂商也在CES的时候就宣布对这项技术进行跟进。


或许不久,就真的可以用中文和NPC一起玩耍了,你会期待这样的游戏吗?


文章来自于微信公众号“量子位”(ID: QbitAI),作者 “克雷西”