Convai在 #CES2024 的NVIDIA特别直播中宣布了其最新游戏AI功能：场景感知和NPC行动...

network

Convai在 #CES2024 的NVIDIA特别直播中宣布了其最新游戏AI功能：场景感知和NPC行动生成功能。与今年早些时候展示的技术有了非常大的进步。由于是AI生成，演示中，同一场景NPC的每次对话可能都不一样，极大提高了游戏的体验，更牛P的是NPC现在能和玩家进行语音对话交流。而且不仅限于对话，NPC还能自主执行任务！同时利用生成式AI技术，NPC现在不仅能进行对话，还能执行复杂的动作，比如获取物品、跟随角色，甚至在游戏过程中动态执行复杂任务。更牛的，游戏世界中的角色还可以互相聊天、分享想法，甚至指使其他NPC 执行行动任务。Convai集成了ACE模块的Audio2face和Riva ASRAudio2face：一个将音频信号转换为面部动画或表情的模块。在实际应用中，这意味着通过分析语音数据，该系统能够生成相应的面部表情，使得虚拟角色或NPC（的面部表情更加自然、逼真。Riva ASR：ASR通常指的是自动语音识别（Automatic Speech Recognition），可以让系统理解和转录人类语音，将语音转换为文字，从而实现与人类用户的有效交互。Convai通过整合这两个模块，可能是在努力提高其系统的交互能力和真实感，使得NPC能够更自然地响应语音输入，并以逼真的面部表情反映出来。

network

Convai在 #CES2024 的NVIDIA特别直播中宣布了其最新游戏AI功能：场景感知和NPC行动生成功能。

与今年早些时候展示的技术有了非常大的进步。

由于是AI生成，演示中，同一场景NPC的每次对话可能都不一样，极大提高了游戏的体验，更牛P的是NPC现在能和玩家进行语音对话交流。

而且不仅限于对话，NPC还能自主执行任务！

同时利用生成式AI技术，NPC现在不仅能进行对话，还能执行复杂的动作，比如获取物品、跟随角色，甚至在游戏过程中动态执行复杂任务。

更牛的，游戏世界中的角色还可以互相聊天、分享想法，甚至指使其他NPC 执行行动任务。

Convai集成了ACE模块的Audio2face和Riva ASR

Audio2face：一个将音频信号转换为面部动画或表情的模块。在实际应用中，这意味着通过分析语音数据，该系统能够生成相应的面部表情，使得虚拟角色或NPC（的面部表情更加自然、逼真。

Riva ASR：ASR通常指的是自动语音识别（Automatic Speech Recognition），可以让系统理解和转录人类语音，将语音转换为文字，从而实现与人类用户的有效交互。

Convai通过整合这两个模块，可能是在努力提高其系统的交互能力和真实感，使得NPC能够更自然地响应语音输入，并以逼真的面部表情反映出来。

network

NVIDIA ACE for Games：赋予NPC生命

英伟达与Convai合作，由生成式AI驱动游戏内的NPC，为玩家提供沉浸式、动态互动的游戏体验。

视频展示了一个沉浸式和动态的交互场景！