在 Gamescom 2024 游戏展上，NVIDIA 宣布推出首款用于提高游戏角色对话能力的设备上小语言模型 (SLM)。我们还宣布，首款展示 NVIDIA ACE 和数字人技术的游戏是由 Seasun Games 开发的‘机甲突破 (Mecha BREAK)’，该游戏可让角色如生，并在 NVIDIA GeForce RTX AI PC 上提供更动态、更身临其境的游戏体验。
NVIDIA ACE 推出专门为角色扮演打造的SLM
NVIDIA ACE 是一套数字人技术，可以提供由生成式 AI 提供动力支持的语音、智能和动画。它现在包含首款 NVIDIA SLM，即 Nemotron-4 4B Instruct。这款新模型可作为 NVIDIA NIM 提供，供游戏开发者在云和设备上部署。NVIDIA NIM 是一套易于使用的微服务，可以加快基础模型在任何云或数据中心的部署速度。
Nemotron-4 4B Instruct 通过提炼、剪枝和 INT4 量化进行优化，以实现设备上的推理速度和加速。VRAM 使用量已降低到约 2 GB，与大型语言模型（LLMs）相比，获得首个令牌的时间显著加快。
- 蒸是训练较小的模型（称为学生模型）以模拟较大模型（教师模型）的输出的过程。
- 剪枝是移除学生模型的非关键输出的过程。
- 量化是降低模型的权重和激活精度的过程。
Nemotron-4 4B Instruct 来自 Nemotron-4 15B LLM，并通过指令调优专门构建。指令调优是一种根据指令提示微调模型的技术，以便更好地执行特定任务。该模型提供更好的角色扮演、检索增强生成（RAG）和函数调用功能，使游戏角色能够更直观地理解玩家的指令，对游戏玩家做出响应，并执行更准确和相关的操作。
您可以在云端的数字人技术制作流程中使用Nemotron-4 4B Instruct NIM，或利用超过1亿的NVIDIA GeForce RTX驱动PC和笔记本电脑进行设备上推理。
为了让您更轻松地使用 Nemotron-4 4B Instruct NIM，Unreal Engine 5 ACE 示例应用程序已经更新，提供了设备上的插件支持。
借助 NVIDIA ACE NIM 实现首次游戏首映
NVIDIA Audio2Face-3D NIM 和 Whisper（OpenAI 的自动语音识别模型）可在设备上提供面部动画和语音识别。Elevenlabs 通过云提供角色的语音。
在这个演示中，NVIDIA ACE 和数字人技术使玩家能够与机械师进行交互，该机械师可以帮助他们从多样化的机甲中进行选择，以满足其游戏风格或团队需求，协助定制外观，并就如何更好地准备其庞大的战争机器以进行战斗提供建议。
游戏开发者探索最新的人类数字技术
NVIDIA ACE 和数字人技术继续扩大其在游戏行业中的影响力。
全球游戏发行商兼开发商 Perfect World Games 正在利用AI驱动的新视觉功能推进其NVIDIA ACE和数字人技术演示”英雄（Legends）”。在演示中，角色Yun Ni可以使用由 ChatGPT-4o 提供支持的计算机摄像头查看游戏玩家并识别现实世界中的人物和物体，为游戏体验添加增强现实层。
这些功能将 PC 游戏的沉浸感和可访问性提升到了新的水平。有关更多信息，请参阅 NVIDIA ACE 并下载 NIM，开始构建由生成式 AI 驱动的游戏角色。
