英伟达发布数字人微服务,推动制作生成式AI数字化身发展

科技陀螺转不停 2024-06-05 07:46:47

英伟达宣布全面推出NVIDIA ACE生成式AI微服务,以加速新一代数字人的发展,并将在平台上推出全新的生成式AI突破。客户服务、游戏和医疗保健领域的公司率先采用ACE技术,以简化在客户服务、远程医疗、游戏和娱乐领域创建、动画化并操作栩栩如生的数字人的过程。

NVIDIA ACE数字人生成式AI套件现已全面推出,包括以下内容:

NVIDIA Riva ASR,TTS和NMT — 用于自动语音识别、文本到语音转换和翻译。NVIDIA Nemotron LLM — 用于语言理解以及根据上下文生成回复。NVIDIA Audio2Face — 根据音轨制作栩栩如生的面部动画。NVIDIA Omniverse RTX — 用于实时路径追踪以制作逼真的皮肤和毛发。

全新推出的技术包括:

NVIDIA Audio2Gesture — 用于根据音轨生成肢体手势,即将推出。NVIDIA Nemotron-3 4.5B — 一种全新的小语言模型 (SLM),专为低延迟、本地端RTX AI PC推理而设计。

英伟达创始人兼首席执行官黄仁勋表示:“数字人将为各行各业带来革命性变革。NVIDIA ACE为我们的开发者生态提供多模态大语言模型和神经图形领域的突破,使我们更接近意图驱动的计算未来,即与计算机的交互将像与人类的互动一样自然。”

英伟达已将ACE作为NIM微服务提供给开发者在数据中心运行。现在,英伟达正在打造ACE PC NIM微服务,可以部署在装机量达到一亿台的RTX AI PC和笔记本电脑上。

这包括NVIDIA的首个小语言模型(SLM) -- NVIDIA Nemotron-3 4.5B,该模型专门用于在终端设备上运行,具有与在云端运行的大语言模型(LLMs)相似的精度和准确性。Nemotron-3 4.5B 小语言模型(SLM)现已进入抢先体验阶段。NVIDIA Audio2Face和NVIDIA Riva ASR的设备端模型也将很快推出抢先体验版。

全新的NVIDIA AI Inference Manager (AIM)应用开发工具包简化了ACE在PC上的部署过程。它以统一格式为PC预先配置必要的AI模型、引擎和依赖包,同时在PC和云端之间完美调度AI推理操作。

与Inworld AI合作开发的最新版Covert Protocol技术Demo在COMPUTEX演示。通过在 GeForce RTX PC上本地运行Audio2Face和Riva ASR,该演示使玩家能够通过对话来互动,并影响数字人非玩家角色(NPC)的行为,以完成任务。

目前英伟达正与Aww Inc.、戴尔科技、Gumption、Hippocratic AI、英业达、掌趣科技、完美世界游戏、Reality Arts、甲尚科技、ServiceNow、Soulbotix、数字栩生和UneeQ等公司的开发者合作,利用ACE开发各种应用。不仅包括数字人网红、游戏的AI NPC、B端AI咨询类数字人,还有数字人员工和虚拟助手等领域都可在NVIDIA ACE的支持下,得到进一步的能力提升。

来源:英伟达

0 阅读:0

科技陀螺转不停

简介:感谢大家的关注