Ben Williams

Ben Williams 是 NVIDIA 的高级软件工程师,从事 NCCL 研究。他的工作重点是网络和新型网络设备集成以及自动化。他于 2017 年毕业于爱荷华州立大学,获得计算机工程硕士学位,重点是加速计算。从那时起,他一直在 Microsoft 从事网络 FPGA 数据中心加速器研究,直到 2022 年加入 NVIDIA。

Posts by Ben Williams

AI 平台/部署

了解 NCCL 调优以加速 GPU 之间的通信

NVIDIA 集合通信库 (NCCL) 对于 AI 工作负载中的快速 GPU 到 GPU 通信至关重要,可使用各种优化和调优来提升性能。但是, 3 MIN READ
数据中心/云端

NVIDIA 集合通信库 2.26 实现性能和监控功能的提升

NVIDIA 集合通信库 (NCCL) 可实现针对 NVIDIA GPU 和网络优化的多 GPU 和多节点通信基元。 3 MIN READ
数据中心/云端

使用 NCCL 2.24 实现大规模网络可靠性和可观察性

NVIDIA 集合通信库 (NCCL) 实现了针对 NVIDIA GPU 和网络优化的多 GPU 和多节点 (MGMN) 通信基元。 3 MIN READ
数据中心/云端

NVIDIA 集合通信库 2.23 促使新的缩放算法和初始化方法的诞生

NVIDIA 集合通信库 (NCCL) 可实现针对 NVIDIA GPU 和网络进行优化的多 GPU 和多节点通信基元。 2 MIN READ
数据中心/云端

借助 NVIDIA 集合通信库实现显存高效、快速初始化和成本估算优化 2.22

在过去几个月中,NVIDIA 集合通信库(NCCL)开发者一直在努力开发一系列新的库功能和错误修复。在本文中,我们将讨论 NCCL 2.22… 2 MIN READ