在当今的数字时代，对于希望将愿景变为现实的电影制作人、游戏开发者和内容创作者而言，创作逼真的动画人物至关重要。Reallusion 处于这种尖端艺术形式的前沿，使用了强大的人工智能技术，例如NVIDIA Audio2Face和NVIDIA Maxine制作逼真的数字人和角色动画。
在捕捉同步面部动画的同时匹配音频，并在单个通道中创建整体输出方面存在重大挑战。Reallusion 采用 Maxine AR 解决了这一问题，绕过了这种复杂的多轨定时同步，使用链式特效创建了革命性的 motion capture（mocap）解决方案，可以将动画和音频有效地生成单个流。
变革角色表演：Audio2Face 与 Reallusion 的 iClone 和 Character Creator 集成
Audio2Face 是一种先进的 AI 技术，可以仅通过音频或文本输入自动生成富有表现力的面部动画和唇部同步。它支持多种语言，并且可以为说话甚至是说话的角色制作动画。
它不仅限于使用多种语言进行唇部同步对话。最新独立版本的 Audio2Face 还包含了为逼真的面部表情制作动画的功能，允许动画师使用 slider 和 keyframe 控制，通过角色的表情与语音动画一起，为最复杂的情绪和个性制作动画。
Reallusion 已经通过其 Character Creator 和 iClone 应用程序中的插件集成 Audio2Face，从而实现无缝的 AI 辅助动画工作流。只需单击一下，您就可以准备用于动画的资产，该资产会生成与任何提供的音频轨道相匹配的实时面部运动。然后，生成的动画可以直接过渡到 iClone，从而在将其渲染到 3D 应用、游戏引擎和其他生产环境之前实现额外的抛光和优化。
通过 NVIDIA 和 Reallusion 的密切合作，CC Character Auto Setup 插件将之前繁琐的 18 步流程整合到一个简单的操作中。
导入 Character Creator 素材，然后选择Mark或Claire训练模型，然后通过与任何音频输入同步的逼真面部动画，立即看到 3D 角色变得生动起来。
您可以使用 Audio2Face 的 motion sliders、auto-expression tools 和 keyframe controls 来进一步 sculpt 性能，然后将抛光动画直接传递到 iClone，以进行最终生产改进。这正是 iClone 强大的面部编辑能力发挥作用的地方，它提供了将 performances 转换为准备用于生产的 polished character animations 所需的所有必要工具。
在 iClone 的用户友好界面中，您可以精细控制面部动画的各个方面。您可以精确调整表情级别、头部动作和复杂的细节 (例如模拟眼镖)，以真实地传达角色的独特个性：
- 下范围可以被放大，以在需要时传达强大的情绪强度。
- 我们可以仔细雕刻语言动作，以真实地模仿发音和语音模式。
iClone 还可以整合头部移动设备，例如AccuFACE或iPhone Live Face.
AccuFACE：由 NVIDIA Maxine AR SDK 提供动力支持的新一代 AI 面部表情包
真实的面部表现不仅仅包含唇部同步；它们在很大程度上由细致入微的面部表情以及与语言表达的情感的一致性提供信息。
例如，讽刺的传递方式在很大程度上依赖于面部表情 — — 表达“It tastes fine”(它很好) 这样的短语，同时表现出一种令人讨厌的表情所传达的含义明显不同。
为了封装这些隐性线索，除了制作工作流程中的音频组件之外，还必须集成视觉性能捕获。
AccuFACE 借助 NVIDIA Maxine AR SDK 实现了前所未有的实时面部捕捉质量和功能。由 NVIDIA GPUs with Tensor Cores 提供动力支持的 Maxine AR SDK，可以提供 AI-driven 的 3D 面部追踪和建模、body pose estimation 等功能。它通过 parallel processing 即时分析 expressions，同时提高 throughput 并尽可能降低 latency。
AccuFACE 利用的主要特性包括：
- 精确的特征映射
- 头部姿态和变形追踪
- 面部网格重建
- 强大的人脸检测和定位功能
AccuFACE 利用先进的 Maxine 技术，将捕获的面部数据转换为无缝的数字动画，使您能够生成富有表现力的面部动画、实时驱动响应灵敏的 3D 虚拟形象，并促进交互式虚拟对话。
AccuFACE 提供了一个全面的工具包，可让您针对专业级结果优化 AI 生成的跟踪：
- 设备设置，例如平滑过滤和降噪、地址抖动、抖动和其他跟踪伪影。
- 抗干扰消除功能可防止额头、口中和头部动作发生错误的交叉触发，从而避免表情模糊或夸张。
为了捕捉独特的表情，可以添加进一步的校准和细化。这旨在从区域层面增强眼睛、双脸和唇部的雕刻运动强度，以呈现单个演员的真实感及其独特的表演。
Reallusion 与 NVIDIA 的合作展示了 AI 在动画领域的变革潜力；专业级面部动作捕捉和动画现已触手可及。
借助用于优化面部动画和同步的直观工具，您无需广泛的专业知识或专业设备即可获得高质量的结果，从而彻底改变数字角色动画的格局。
可用性
从满足日常视频会议需求到集成 AI 技术，NVIDIA Maxine 可为所有专业人士提供高质量的视频通信。
最新的 Maxine 产品版本仅包含NVIDIA AI Enterprise，它使您能够利用 Triton 推理服务器、企业支持等生产就绪型功能。
如果您对抢先体验感兴趣，可以使用非生产性生产访问权限和即将发布的功能，请参阅Maxine 抢先体验计划(需要登录)。
为帮助改进即将发布的版本中的功能，请针对NVIDIA Maxine 和 NVIDIA Broadcast 应用程序调查。
