ChatGPT 人工智能 GPT4 伦理 生成式 医疗 监管 安全 机器学习 深度学习 神经网络 计算机视觉 强化学习 模型 算法 应用 开发 研究 工具 平台 框架 数据集 训练 部署 安全 合规 培训 投资 LLM,llm AI,ai,Ai 大模型 大语言模型 制图 生图 绘图 文生图 文生视频 生成式AI AGI 世界模型 sora chatGPT,chatgpt,ChatGpt claude openai Llama deepseek midjourney 红熊猫模型 Red panda,panda Stable Diffusion,StableDiffusion,stable DALL- E 3 DALL E DALL Flux,flux 扩散模型 混元大模型 文心一言 通义千问 可灵 Pika PixelDance 豆包 月之暗面 零一万物 阶跃星辰 搜索增强 MiniMax Talkie Agent prompt fastai LangChain TTS 微调 提示词 知识库 智能体
# 热门搜索 #
搜索
英伟达AI游戏引擎炸场CES!NPC与玩家实时交互,对话动作流畅似真人
4674点击    2024-01-10 09:47

《赛博朋克2077》里的NPC,已经会和玩家对话了?


还是根据玩家说的话实时响应,不用背剧本的那种?



在CES 2024的活动上,英伟达展示了利用Avatar Cloud Engine (ACE)技术打造的最新成果。


在ACE的加持之下,游戏中的人物纷纷“活”了起来,与其他角色甚至真人玩家一起对话交流,并根据对话内容做出动作。


而至于对话质量,网友评价说,离控制主角还有些差距,但是如果用于驱动配角的话,效果已经很好了。



这样的游戏场景由英伟达开发者平台的合作者Convai打造,其创始人兼CEO Purnendu Mukherjee曾在英伟达担任高级工程师。


Convai是一个主要面向游戏开发者的数字人平台,提供了语音识别/合成、语言理解与生成等AI对话服务。


它支持包括中英文在内的多种语言,兼容Unity、Unreal Engine等主流游戏引擎,人们可以利用它创建真实的游戏角色。


这些角色可以像真人一样交谈、回答问题和互动,并具有丰富的情感和个性。



伴随着ACE等一系列重磅成果在CES上公布,英伟达的股价也创新高,盘后交易结束后达到了每股527美元。



那么,由英伟达AI控制的NPC,到底都能说些什么呢?


与NPC直接对话


英伟达高级产品经理Seth Schneider(游戏中叫Kai)展示了他与《赛博朋克2077》NPC对话过程。


在走进这家面馆之前,AI控制的男店员Jin和女顾客Nova已经在攀谈了。


而且他们讨论的内容正是关于AI,Nova还说除了没有血肉之外他们已经很真实了。



字幕由AI生成,下同


接着,Nova看到了“迎面而来”的Kai,他们已经很久没见面了,Nova他是不是在躲着自己。


Kai赶紧解释到,自己并没有躲着Nova,只是最近太忙了,然后询问起了Nova的近况。


Nova说自己很好,并且最近刚和一家公司签下了一笔大单,接着镜头转向了Jin……



Kai向Jin重复了Nova成功签单的消息,并提议庆祝一下。


Jin也同意Kai的想法,不过也说不要期待着每次都能像这样成功。


除了和玩家对话,NPC还会根据对话的内容做出相应的动作,比如在Kai提出庆祝之后拿出酒杯。



随着对话的进行,Nova提到了自己正在秘密的GPU上研究一种新的游戏技术,但不能在这里详细讨论,可以到实验室里看看。


Kai立马回答说自己很想去一探究竟,结果Nova爽快地答应,然后做出了起身的动作……



另外据介绍,玩家每次进入游戏时,NPC都会谈论不同的内容,摆脱了剧本的束缚。


而这段视频所利用的,正是英伟达的ACE技术。


多家开发商宣布跟进


ACE是英伟达提出的生成式AI解决方案,可以帮助开发者在游戏中构建包含语音、对话和动画的AI模型。



ACE最早去年3月亮相,在这次的CES上终于宣布已开放给了部分开发商。


具体来说,这次英伟达开放试用的是针对NVIDIA Riva和NVIDIA Audio2Face这两个模块的ACE微服务。


Riva是一款基于神经网络的语音处理系统,支持语音识别/合成和基于神经网络的翻译,为玩家和NPC的对话提供了支持。


Audio2Face则会根据对话内容调控NPC的口型和面部表情,使其对话场景更为真实。


这一消息宣布后,马上就有多家游戏公司响应,比如育碧就宣布将会利用英伟达的AI工具来构建游戏角色。



国内方面,腾讯、网易、米哈游等游戏大厂也纷纷宣布将会跟进。



那么,你期待和AI打造的游戏角色一起玩耍吗?


视频地址:


https://www.youtube.com/watch?v=psrXGPh80UM


参考链接:


[1]https://blogs.nvidia.com/blog/ces-2024/


[2]https://www.shacknews.com/article/138201/nvidia-convai-ai-npc-ces-2024


[3]https://decrypt.co/212025/ubisoft-nvidia-ai-tools-npc-chat-characters


文章来自于微信公众号“量子位”(ID: QbitAI),作者 “克雷西”


关键词: AI游戏 , AI NPC , CES , Riva
AITNT资源拓展
根据文章内容,系统为您匹配了更有价值的资源信息。内容由AI生成,仅供参考
1
数字人

【开源免费】Fay开源数字人框架是一个AI数字人项目,该项目可以帮你实现“线上线下的数字人销售员”,

“一个人机交互的数字人助理”或者是一个一个可以自主决策、主动联系管理员的智能体数字人。

项目地址:https://github.com/xszyou/Fay

2
无人直播

【开源免费】VideoChat是一个开源数字人实时对话,该项目支持支持语音输入和实时对话,数字人形象可自定义等功能,首次对话延迟低至3s。

项目地址:https://github.com/Henry-23/VideoChat

在线体验:https://www.modelscope.cn/studios/AI-ModelScope/video_chat


【开源免费】Streamer-Sales 销冠是一个AI直播卖货大模型。该模型具备AI生成直播文案,生成数字人形象进行直播,并通过RAG技术对现有数据进行寻找后实时回答用户问题等AI直播卖货的所有功能。

项目地址:https://github.com/PeterH0323/Streamer-Sales