NVIDIA 刚在 CES 2023 上宣布, NVIDIA Omniverse Avatar 云引擎( ACE )现在可以提前访问。构建虚拟化身和虚拟助理的开发人员和团队可以注册加入该计划,其中包括访问云原生 AI 微服务的 Omniverse ACE 套件,以更快、更容易地开发交互式虚拟化身。
早期合作伙伴包括 Ready Player Me ,其头像在 CES 演示中展示。通过这一早期访问计划, NVIDIA 正在寻找开发人员和合作伙伴,以提供有关微服务的反馈,合作改进产品,并帮助推动逼真、交互式的数字人的极限。随着项目的不断扩大,申请人将在滚动的基础上进行审查和批准。
什么是 Omniverse ACE 早期访问计划?
开发化身的方法通常需要专业知识、专用设备和人工密集型工作流。
为了简化化身创建, Omniverse ACE 支持 NVIDIA AI 技术的无缝集成,包括预构建模型、工具集和特定领域的参考应用程序。可用的化身应用程序构建在大多数引擎上,并部署在公共云或私有云上。
视频 1 。 CES2023 特别地址展示 Omniverse ACE 早期访问。
早期访问计划包括访问 Omniverse ACE 动画 AI 和对话式 AI 微服务的预发布版本,包括:
- 3D animation AI microservice 用于第三方化身。它使用 Omniverse Audio2Face 生成 AI ,通过仅从音频文件创建逼真的面部动画,使虚幻引擎和其他渲染工具中的人物栩栩如生。
- 2D animation AI microservice, 被称为“实时肖像”,使用实时视频源可以轻松制作 2D 肖像或风格化人脸的动画。
- Text-to-speech microservice 使用 NVIDIA Riva TTS 从原始转录本合成自然发音语音,而无需任何附加信息,例如语音模式或节奏。
项目成员还可以访问工具、示例参考应用程序和支持资源,包括文档。
EA 计划最理想的用例是什么?
NVIDIA Omniverse ACE 凭借其云原生微服务设计和基础设施,最适合从公共云或私有云部署的应用程序,并设计为可扩展。
这个早期的访问版本包括容器化的微服务,需要开发人员通过自己的云基础设施进行部署。其他资源包括 NVIDIA UCF Studio ,这是一个用于开发云原生、实时和多模式 AI 应用程序的低代码计算框架。 注册以申请 UCF 抢先体验 。
例如,您可以创建一个简单的工作流,利用 UCF Studio 将 Riva TTS 微服务与 Omniverse ACE 3D 动画 AI 微服务连接起来。结果是一个云就绪的化身应用程序,它用合成语音说出输入的文本,并动画化化身的嘴唇和面部动作。
也就是说,并非所有应用程序都必须在云上运行。任何创作不需要大规模部署的离线化身的人都可以利用 NVIDIA AI SDK 和工具,包括 Omniverse Audio2Face 。
开始使用 Omniverse ACE 早期访问
对 Omniverse ACE 感兴趣,但不确定早期访问计划是否合适?查看以下资源以了解更多信息,并开始试用 NVIDIA AI 核心技术
- 了解有关 Omniverse ACE 的更多信息,并观看 NVIDIA special address at CES on demand 。
- 探索相关的 NVIDIA AI 技术,包括 Omniverse Audio2Face 和 Riva TTS 。这些 SDK 和工具非常适合不必针对云进行优化的化身应用程序。他们是开始熟悉技术的好方法。
- 注册 Omniverse ACE early access program ,并尽可能多地分享有关您的云原生化身用例的详细信息。 NVIDIA 团队将审查每个应用程序并跟进任何问题。