英伟达发布 CUDA Toolkit 13.5:正式支持 Vera Rubin,升级多 GPU 通信
The Block
Ai 注目
英伟达于当地时间 11 月 4 日正式发布 CUDA Toolkit 13.5,为下一代 AI 计算平台 Vera Rubin 提供正式可用(GA)支持。此次更新还针对 GPU 调度、多 GPU 通信、数学计算库和性能分析工具进行了多项升级,并同步发布 R620 系列数据中心 GPU 驱动。
役立つ
No.ヘルプ

IT之家 11 月 5 日消息,英伟达于当地时间 11 月 4 日正式发布最新的 CUDA Toolkit 13.5,为下一代 AI 计算平台 Vera Rubin 提供正式可用(GA)支持,标志着相关架构从早期开发者预览阶段进入面向企业生产环境的部署阶段。

据英伟达官方介绍,此次更新不仅完善了 Vera Rubin 平台的底层软件支持,还针对 GPU 资源调度、多 GPU 通信、数学计算库及性能分析工具进行了多项升级,重点面向大规模 AI 训练和推理场景。

在计算性能方面,CUDA 13.5 更新了 cuBLAS 的矩阵乘法启发式策略和内核调优机制,针对 Vera Rubin 架构上的 NVFP4、MXFP8 低精度矩阵运算进行了优化,覆盖混合专家模型(MoE)等训练场景。英伟达表示,这些改进能够在无需针对每种计算形状单独进行自动调优的情况下,提高训练和推理吞吐量。

在 GPU 调度方面,CUDA 13.5 对 NVIDIA 多进程服务(MPS)v3 进行了升级,新增加权时间片机制。管理员可以为运行重负载的 MPS 服务器设置更长的基础计算时间片,同时独立调整 GPU 在不同任务之间的切换频率,从而更灵活地控制多任务环境下的资源分配。

MPS v3 还加入了流式多处理器(SM)分区负载均衡功能。任务可以在资源充足时借用其他分区暂时闲置的 SM 资源,而当原分区需要使用这些资源时,系统会先回收已借出的部分。无论资源如何动态流转,应用看到的基础分区规模始终保持稳定。此外,新版本还增加了基于 Linux cgroup 的资源路由和命名空间级 SM 分区配置。

局部域(Locality Domain)也获得了新的资源划分策略。应用现在可以选择两种 SM 分区方式:一种是在各局部域中分配相同数量的 SM,以保证资源规模的一致性和可预测性;另一种则将原本处于分区之外的补充 SM 纳入计算分区,尽可能利用 GPU 全部计算资源。开发者还可以通过相关 API 查询各分区实际获得的 SM 数量,以便合理分配计算任务。

多 GPU 通信能力是此次更新的另一项重点。CUDA Tile 现在支持在计算内核内部直接访问其他 GPU 的显存,相关功能依托 NVLink 高速互连实现。借助多播指针和专用多 GPU 内存操作,开发者还可以在支持 NVLink SHARP 的 NVSwitch 网络中执行跨 GPU 数据归约和写入操作。

这意味着开发者能够将 GPU 之间的数据通信与计算操作融合在同一个内核中执行,减少传统多卡协同过程中因内核边界和数据传递产生的额外开销。英伟达列举的适用场景包括融合矩阵乘法和跨 GPU 数据归约。

Windows 平台方面,英伟达明确调整了 Rubin 架构的驱动模型支持范围。从 Rubin 架构开始,CUDA 不再支持 Tesla Compute Cluster(TCC)模式,仅支持 Windows Display Driver Model(WDDM)和 Microsoft Compute Driver Model(MCDM)。其中,MCDM 是面向纯计算场景的驱动模型,相关应用和部署工具需要适配新的支持范围。

开发工具方面,CUDA 13.5 首次以公开预览形式推出 NVIDIA Nsight Perf SDK for AI,为长时间运行的 AI 训练和推理任务提供常开式性能分析能力。该工具能够持续收集 GPU、CPU 性能指标及执行上下文,帮助开发者定位难以复现的间歇性性能问题,并支持通过 Perfetto 查看采集结果。

此外,CUDA 13.5 还更新了 CUDA Python、CUDA Graph、CCCL 3.5 等组件。其中,CUDA Python 1.2 增加批量内存复制、程序化依赖启动(PDL)以及更灵活的 CUDA Graph 更新能力;CCCL 3.5 则加入面向 CUB 的公开调优接口、批量 Top-K 选择和可重复浮点扫描等功能。

驱动方面,英伟达同步发布 R620 系列数据中心 GPU 驱动,其中 Linux 版本为 620.70.06,Windows 版本为 621.14,发布日期均为 11 月 4 日。IT之家提醒,CUDA Toolkit 13.5 与数据中心驱动分别发布,驱动不再作为 Toolkit 的内置组件提供。

相关阅读:

  • 《 英伟达回应 Vera Rubin 平台规格变更:新版为量产规格,第三方跑分均是按量产版测的 》
  • 《 英伟达发布 Game Ready 621.14 驱动:优化〈魔兽世界:无限〉,修复视频黑屏问题 》
チップ
$0
いいね
0
保存
0
閲覧数 33
CoinWorldは、読者の皆様にブロックチェーンを理性的に捉え、リスク意識を高め、各種仮想トークンの発行と投機に注意を払うようお願いします。サイト内のすべてのコンテンツは市場情報または関連する見解のみであり、いかなる形式の投資アドバイスも構成しません。機密情報を含むコンテンツを発見した場合は、“報告”,をクリックしてください。すぐに対処します。
送信
コメント 0
人気
最新
まだコメントがありません。最初のコメントを投稿しましょう!
関連
CZ 警告一种冒充 Trust Wallet 的加密钓鱼骗局
币安联合创始人赵长鹏(CZ)警告称,攻击者正在使用一个仿冒 Trust Wallet 的虚假网站实施加密钓鱼骗局,诱骗用户连接钱包。报道还提到,近期针对钱包用户的钓鱼尝试有所增加,涉及伪装成 Trust Wallet 的假邮件和二维码攻击。
U.Today
·2026-11-05 14:37:14
0
Ripple首席执行官称尽管美国中期选举受挫 亲加密候选人仍在两党中获胜
Ripple首席执行官Brad Garlinghouse表示,尽管民主党重新掌控美国国会、部分获加密行业支持的候选人遭遇失利,但支持数字资产的候选人在两党中仍赢得席位。Ripple首席法务官Stuart Alderoty称,Fairshake在初选和大选中均取得成果,行业仍将继续通过政治行动委员会、倡议组织和教育项目推动建立明确的联邦数字资产监管规则。
crypto.news
·2026-11-05 14:08:23
7
开发者称比特币下一次升级 BIP-54 可能修复四项长期缺陷
比特币开发者 Matt Corallo 估计,旨在修复网络四项长期漏洞的提案 BIP-54 有 80% 的概率成为比特币下一次软分叉。该提案将针对挖矿难度调整、区块验证、Merkle 树证明和重复 coinbase 交易等问题,但目前尚无确认的激活日期。
crypto.news
·2026-11-05 14:08:20
6
Arthur Hayes 警告 AI 巨头大规模抛售股票或令比特币承压
BitMEX 联合创始人 Arthur Hayes 警告称,主要人工智能公司 IPO 后的大规模股份解禁和抛售,可能压制科技股、抬高融资成本并收紧美元流动性,从而在央行介入前给比特币带来压力。他预计 Anthropic 早期投资者到 2027 年 6 月可能面临其所称的 83% 稀释,并表示其投资公司 Maelstrom 将暂时观望,等待流动性改善。
crypto.news
·2026-11-05 14:08:15
7
もっと見る