英伟达 Dynamo 发布:号称“AI 工厂的操作系统”,Blackwell 买得越多、省得越多

内容摘要IT之家 3 月 19 日消息,英伟达今日正式发布 Dynamo,号称是“AI 工厂的操作系统”。Dynamo 是一个“分布式推理服务库”。本质上,它是一个针对用户需求 token 而无法生产足够 token 之间问题的开源解决方案。黄仁勋

IT之家 3 月 19 日消息,英伟达今日正式发布 Dynamo,号称是“AI 工厂的操作系统”。

Dynamo 是一个“分布式推理服务库”。本质上,它是一个针对用户需求 token 而无法生产足够 token 之间问题的开源解决方案。

黄仁勋展示了一张关于推理的图表,X 轴显示用户每秒的 Token 数,Y 轴显示工厂每秒的 Token 数。

在 Dynamo、Grace Blackwell NVlink72 超级芯片的加持下,Blackwell 相比 Hopper 可实现 25 倍的性能提升。

而在推理模型中,Blackwell 的性能是 Hopper 的 40 倍。

IT之家注意到,黄仁勋还打趣道,有了上述最新技术加持,搭建 AI 工厂的厂商“买得越多、省得越多”,总而言之就是掏钱吧。

英伟达 GTC 2025 大会专题
 
举报 收藏 打赏 评论 0
24小时热闻
今日推荐
浙ICP备2021030705号-9