机器人

借助新的 NVIDIA Omniverse Replicator 功能,以前所未有的速度加快 AI 培训

GTC 上宣布,技术艺术家、软件开发人员和 ML 工程师现在可以使用 NVIDIA Omniverse Replicator 在云中构建自定义、物理精确的合成数据生成管道。

Omniverse Replicator 是一个构建在 NVIDIA Omniverse 平台上的高度可扩展框架,它支持物理精确的 3D 合成数据生成 ,以加快感知网络的训练和准确性。

Omniverse Replicator 现在可以通过 NVIDIA NGC 上托管的容器部署在 云端 中, SaaS 可供应用程序早期访问。 Replicator 工具和内容套件现在还包括一个新的 Replicator Insight 应用程序,用于增强对生成数据的查看和检查,以及新的 SimReady 内容和即插即用合成数据工作流指南。

许多合作伙伴正在其现有工具中集成 Omniverse Replicator ,以扩展其合成数据工作流。西门子凭借其 SynthAI 软件、 SmartCowMirageLightning AI 率先使用 Omniverse Replicator 加速高质量合成数据生成。

合成数据:从本地到云

对于希望云部署的灵活性和可扩展性的开发人员和企业, Omniverse Replicator 现在可以作为 AWS 上的容器部署使用。您可以成为 NGC 的成员,在 Amazon EC2 G5 实例上访问容器和自助部署,该实例采用 A10G Tensor Core GPU 。

Diagram shows the architecture of Omniverse Replicator on the AWS cloud with Amazon EC2 and Amazon S3 to store generated datasets.
图 1.AWS 云架构上的 Omniverse Replicator

增强的检查和查看

生成合成数据和改进人工智能模型是一个迭代过程,需要能够查看和分析沿途生成的数据集。由于数据不容易导航,注释也不容易检查,所以这个过程可能相当麻烦。

在 GTC 上,我们发布了 Omniverse Replicator Insight early access ,这是一个应用程序,可以让您高效直观地查看、检查和分析生成的带有一系列注释的数据集。 Replicator Insight 允许您逐帧浏览来自不同传感器的生成数据集,选择要查看的兴趣点,并检查特定对象的特定注释。

Screenshot shows semantic segmentation in Omniverse Replicator Insight.
图 2. Omniverse Replicator Insight 的用户界面

在带有一系列注释的 Replicator Insight 上,查看、检查和分析生成的数据集是高效而直观的。它允许您逐帧浏览不同传感器生成的数据集。可以选择感兴趣的对象来查看和检查特定对象的注释。

Replicator Insight 让开发人员和研究人员朝着以数据为中心的人工智能培训迈出了一大步,将合成数据更无缝地集成到模型改进过程中。

新 SimReady 资产

Omniverse Replicator SimReady Universal Scene Description ( USD )资产可帮助您开始生成合成数据,以缩小模拟与现实之间的差距:

  • 高保真 3D 资产可在像素级别启动合成数据生成。
  • 上下文内容资产,有助于训练场景中数据的多样性、上下文和行为。

传送带、坡道和纸板箱只是 Omniverse Replicator 库中可用的 SimReady 资产的几个示例。

您可以通过 下载 Omniverse 访问第一批免费 SimReady 资产。有关新资产和其他资源的更多信息,请参阅 New Cloud Applications, SimReady Assets, and Tools for Omniverse Developers Announced at GTC

Replicator 正在运行

一些合作伙伴正在使用 Omniverse Replicator 来加速 AI 感知网络的培训和性能。它们的应用程序跨越端到端合成数据生成工作流的每个阶段。凭借 Omniverse Replicator 作为其应用程序的基础平台,这些合作伙伴正在帮助客户增强数据集并提高各种行业用例的 AI 模型的准确性。

Mirage 正在帮助 ML 工程师了解他们的数据集的薄弱环节,并集成修复这些薄弱环节的合成数据。 Replicator 是 Mirage 客户生成高保真数据以改进其 ML 模型的主干。

Lightning AI 允许您构建模型并使用或创建 Lightning Apps :功能强大的端到端机器学习系统,完全可定制。 Omniverse Replicator Lightning 应用程序允许您快速生成合成数据,以减少与收集和标记真实数据相关的成本和工作量。

Screenshot shows eight camera perspectives on a warehouse floor, with floor tape and shelves.
图 3.显示并行模型训练的 Lightning AI 用户界面

使用 Lightning AI ,研究人员和开发人员可以运行并行的 AutoML 作业,找到性能最佳的对象检测模型,并验证真实世界数据的性能,以生成合成数据。

SmartCow 利用 Omniverse Replicator 简单有效地生成具有变化的合成数据。通过 Replicator 添加这些变化使 SmartCow 能够轻松地不断提高模型准确性。 SmartCow 在迭代过程中使用 Replicator 从数据漂移检测中生成其他变化,并创建改进的模型。

Siemens 正与 NVIDIA 合作,将 Omniverse Replicator 高保真渲染功能和 SDK 引入 SynthAI 的云端。这将确保从产品设计和协作到合成数据生成和模型培训的简单、简化的工作流程,并以成功部署结束。

有关西门子 SynthAI 、 SmartCow 和 Mirage 如何在 Replicator 上构建的更多信息,请将 How to Build a Custom Synthetic Data Pipeline to Train AI Perception Models GTC 会话添加到日历中。

立即开始构建 3D 合成生成管道

您可以从 下载 Omniverse 开始使用 Omniverse Replicator 并安装 Omniverse Code 应用程序。

要获得 Replicator 的实际操作培训,请与 NVIDIA Generate Synthetic Data Using Omniverse Replicator for Perception Models Replicator 产品经理 Omniverse 一起加入位于 GTC 的 Generate Synthetic Data Using Omniverse Replicator for Perception Models DLI 培训实验室。

有关更多信息和最新消息,请参阅以下资源:

 

Tags