NVIDIA发布Nemotron-4 4B Instruct以增强游戏角色互动
realtime news Aug 21, 2024 03:01
NVIDIA推出Nemotron-4 4B Instruct，一款设备端的小型语言模型，以改善《Mecha BREAK》中的游戏角色互动。
NVIDIA宣布推出其首款数字人技术小型语言模型Nemotron-4 4B Instruct，旨在革新游戏角色的对话能力。据NVIDIA博客报道，这款创新模型现正在由Amazing Seasun Games开发的全新多人机甲游戏Mecha BREAK中进行演示。
Nemotron-4 4B Instruct专为在GeForce RTX AI PC上运行而设计，赋予游戏角色更自然地理解和响应玩家的能力。该模型利用NVIDIA的ACE技术，优化部署在GeForce RTX AI PC和笔记本电脑上，显著提升次世代游戏的开发。
专为角色扮演而打造的小型语言模型
Nemotron-4 4B Instruct模型为游戏角色带来了先进的角色扮演、检索增强生成和功能调用能力。这使得游戏角色能够更直观地理解玩家指令，准确响应并执行相关操作。作为NVIDIA NIM微服务提供，该模型优化了内存使用，确保更快的响应时间，并促进了生成式AI应用程序的开发。
作为NVIDIA ACE套件的一部分，Nemotron-4 4B Instruct集成了由生成式AI驱动的语音、智能和动画技术。它可用于云端和设备端部署，为游戏开发者提供了灵活的实施选项。
首款游戏展示ACE NIM微服务
《Mecha BREAK》由金山软件子公司Amazing Seasun Games开发，是首款展示在设备端运行的NVIDIA Nemotron-4 4B Instruct NIM的游戏。该游戏还采用了NVIDIA Audio2Face-3D NIM和Whisper（OpenAI的自动语音识别模型）进行面部动画和语音识别。此外，ElevenLabs通过云端为角色提供语音支持。
在世界最大游戏博览会之一的Gamescom上，NVIDIA展示了ACE和数字人技术如何让玩家与Mecha BREAK中的机械师NPC互动。该NPC帮助玩家选择和定制机甲，提供优化战斗机器的建议。Amazing Seasun Games的CEO Kris Kwok表示：“我们很高兴在Mecha BREAK中展示ACE NIM微服务的力量和潜力，利用Audio2Face和Nemotron-4 4B Instruct显著提升游戏沉浸感。”
完美世界游戏探索最新数字人技术
除了Amazing Seasun Games，全球游戏发行商完美世界游戏也在利用NVIDIA ACE和数字人技术。他们的演示作品《Legends》融入了新的AI驱动视觉能力，使角色云霓能够通过计算机摄像头识别现实世界中的人和物，由ChatGPT-4o提供支持。这为游戏体验增添了增强现实层次，为PC游戏提供了新的沉浸感和可访问性。
欲了解更多关于NVIDIA ACE的信息并下载NIM，请访问官方NVIDIA ACE页面。
Image source: Shutterstock