人工智能/深度学习

新功能和应用程序使使用 NVIDIA Fleet 命令部署 Edge AI 变得简单

NVIDIA Fleet Command是一种云服务,可跨分布式边缘基础设施安全部署、管理和扩展 AI 应用程序。自 7 月舰队司令部启动以来,已经实现了几个重要里程碑,并在 NVIDIA GTC 上展示。

Fleet 命令增加了远程控制台 2 . 0 、 MIG 支持、加密文件存储等功能

舰队司令部不断增加新功能。除了使平台更加健壮和安全外,还结合了来自客户和合作伙伴的反馈,使组织更容易在边缘开始使用人工智能。

今天提供的新功能包括:

  • 多实例 GPU ( MIG )支持:允许将 GPU 安全地划分为单独的 GPU 实例。
  • 远程控制台 2 . 0 :无需额外端口,启动速度更快,以提供及时安全的远程访问。
  • 安全 NFS 支持:允许使用现有的加密存储解决方案。
  • 高级网络:支持代理、无 DHCP 的网络对 IP 地址更改的弹性以及云端的相应可观察性。

有了 NVIDIA LaunchPad ,用户完全可以免费体验 Fleet Command

在今年的 GTC 会议上,我们宣布了 NVIDIA LaunchPad 在全球范围内的可用性。

NVIDIA LaunchPad是一个让企业和组织能够立即、短期访问运行在加速计算上的 NVIDIA AI 的计划,以加速现代数据驱动应用程序的开发和部署。它允许您在可以购买和部署的同一个完整堆栈上快速测试和原型化整个人工智能工作流。

组织可以使用 LaunchPad 获得对舰队司令部的完全访问权,以体验免费部署和扩展 AI 。用户可以访问优化模型和应用程序的目录,以探索 AI 如何为他们的组织带来好处。他们还可以了解一种交钥匙云服务,用于在真实服务器上部署和监控真实应用程序,以及用于无缝调配和运行应用程序的加速边缘计算基础设施。

This image shows the 4 stages of AI development starting with data prep, training at scale, then simulation, and deployment at scale. NVIDIA Base Command is preferable for data prep and training at scale while Fleet Command is better for simulation and deployment at scale.
图 1 。 NVIDIA LaunchPad 允许用户试用 AI 开发的每个阶段,从数据准备到部署。

有兴趣开始使用 NVIDIA LaunchPad 上的 Fleet Command 吗?申请立即访问

Mavenir 基于 NVIDIA AI-On-5G 平台发布 MaveEdge AI

英伟达 AI ON 5G 平台可用于构建连接智能和工业 4 解决方案。该平台基于 NVIDIA Aeror 5G ,由舰队司令部管理,通过使企业能够在同一计算基础设施上部署 AI 和 5G ,在边缘提供互联智能。这种方法提供了灵活、高效、可靠和安全的智能边缘网络,重新定义了业务流程,并在边缘为 AI 提供了新的用例。

MavEdEi 是基于英伟达 AI ON 5G 平台的第一个 AI-ON 5G 解决方案。该解决方案通过 5G 无线电将 5G 连接到 AI-on-5G 硬件和软件,为制造业、采矿业、零售业和医疗保健行业的用例提供视频分析。

MAVedge AI 为 NVIDIA 的 AI-on-5G 平台增加了不断增长的生态系统。 NVIDIA 还与戴尔、富士康和软银等合作伙伴合作,加快在本地或云中构建 AI-on-5G 。

引入英伟达 A2 张量核 GPU 用于边缘推理

Image shows what the NVIDIA A2 Tensor Core GPU looks like
图 2 。 A2 完成基于推理的 GPU s , A100 为最高性能计算机, A30 为主流计算机,现在 A2 为入门级。

今年在 GTC 上发布的还有NVIDIA A2,用于入门级和边缘服务器。

NVIDIA A2 张量核心 GPU 是优化入门级推理,智能视频分析,和英伟达 AI 部署。这对于受空间和散热要求限制的边缘服务器尤其有用,例如 5G 边缘和工业环境。 A2 提供了在低功耗外壳中运行的轻巧外形,从 60W 到 40W 的 TDP ,非常适合任何边缘服务器。

A2的多功能性、紧凑的尺寸和低功耗超过了大规模边缘部署的要求,可立即升级现有入门级 CPU 服务器以处理推理。与 CPU 相比,A2 GPU 加速的服务器提供了高达37倍的推理性能,并且比以前的 CPU 部署效率高1.3倍 GPU 各代产品均以入门级价位销售。

A2 在领先的 OEM NVIDIA 认证系统中可用™, 它跨边缘、数据中心和云提供突破性的推理性能,确保启用 AI 的应用程序部署时使用更少的服务器、更少的电源和更低的成本。作为我们 NVIDIA 认证计划的一部分,基于 NVIDIA A2 GPU 的系统与 Fleet Command 兼容。

NVIDIA 认证系统的两个新类别

NVIDIA 认证系统现在包括边缘系统类别。这些系统经过认证,可提供在传统数据中心之外运行加速应用程序的能力,包括:

  • 推理的优良性能:已经显示了英伟达 A30 系统在一系列推理工作量上提供领先的性能,正如 2021 年 9 月 MLPRF 基准测试结果所证明的。 A30 多实例 GPU ( MIG )支持还允许最多四个工作负载同时运行,并保证其自身的服务质量,从而最大限度地提高计算利用率和效率。
  • 低功耗:新的 A2 GPU 将很快纳入 NVIDIA 认证系统计划。它提供入门级、低功耗、紧凑型加速,用于边缘 AI 和推理,并提供英伟达企业 GPU 组合的最小足迹。
  • 安全性:对 Trusted Platform Module 功能的验证可实现安全引导、磁盘加密和数字签名应用程序的使用。

这是两类经认证的边缘系统。企业边缘系统旨在部署在受控环境中,如零售店。 Industrial edge 系统专为坚固的部署而设计,如高温环境。

Image shows what an edge system may look like in an industrial environment. The image displays machinery on a factory floor.
图 3 。新的 NVIDIA 认证系统是企业和工业边缘环境的理想选择.

Fleet Command 与所有经 NVIDIA 认证的系统兼容,包括 Enterprise Edge 和 Industrial Edge 系统。了解有关NVIDIA-Certified Systems的更多信息。

新的合作伙伴意味着舰队司令部有了新的应用程序

数十个新合作伙伴已添加到我们的生态系统中,为企业提供数百种应用程序选择,以便使用 Fleet Command 在边缘部署。通过将我们的应用程序合作伙伴与构建边缘解决方案的客户联系起来,我们加快了人工智能的时间,并简化了可能需要数周或数月时间的流程。

一些合作伙伴包括Data Monsters,该公司正在使用计算机视觉进行工业检查和制造。Ironyun正在利用 AI 支持的视频分析进行安全、访问控制以及安全和搜索。Kinetic Vision正在为消费品包装企业的 AI 支持的计算机视觉构建端到端解决方案。

舰队司令部继续与客户和合作伙伴保持密切联系。要保持最新状态,请务必检查与舰队指挥和边缘计算相关的所有 GTC 会话。阅读有关我们课程的更多信息

 

Tags