大酷樂
  • 汽车
  • 理财
  • 军事
  • 科技
  • 游戏
  • 互联网
  • 娱乐
  • 财经
  • 科学
  • 社会
  • 亲子
  • 电影
  • 健康
  • 教育
  1. 首頁
  2. 科学

老黄发布新核弹B300,英伟达:B200已破DeepSeek-R1推理世界纪录

2025-03-19 简体 HK SG TW

今天小编分享的科学经验:老黄发布新核弹B300,英伟达:B200已破DeepSeek-R1推理世界纪录,欢迎阅读。

皮衣老黄,带着最强 AI 芯片 GB300闪亮登场 "AI 超级碗 "GTC,燃爆全场!

性能方面,和去年发布的 GB200 相比,推理性能是其 1.5 倍。

据悉,GB300 将在今年的下半年出货。

除此之外,老黄还预览(2026 年下半年发货)了英伟达下一代 AI 超级芯片,名字大变样——Vera Rubin。

其实它的命名规则和 Grace Blackwell(GB)类似:Grace 是 CPU,Blackwell 是 GPU。

而 Vera Rubin 中的 Vera 是 CPU,Rubin 是 GPU。根据老黄的说法:

几乎所有细节都是新的。

从预览的性能来看,Vera Rubin 整体性能更是 GB300 的3.3 倍。更具体一些:

Vera:CPU 的内存是 Grace 的 4.2 倍,内存带宽是 Grace 的 2.4 倍。

Rubin:将配备 288GB 的 HBM4。

在 Vera Rubin 之后的下一代 GPU(2027 年下半年),英伟达会将其命名为 Rubin Ultra,性能直接拉到 GB300 的14 倍。

一个直观的对比,如下图所示:

更多的具体性能对比,是这样的:

性能上的提升,也正应了老黄在现场说的那句话:

大规模推理是一种极限计算。

Inference at-scale is extreme computing.

不仅如此,就连 Rubin 之后的下一代 GPU,老黄也给亮出来了——将以Feynman来命名。

而纵观整场 GTC,我们可以轻松提炼老黄提及最多的几个关键词:tokens、推理和Agentic AI。

但除此之外,还有一个比较有意思的关键词——DeepSeek。

英伟达官方博客称:

实现了 DeepSeek-R1 推理性能世界纪录。

每个用户每秒可处理超过 250 个 token;实现每秒超过 30000 个 token 的最大吞吐量。

但这项纪录采用的是 B200,英伟达表示随着 Blackwell Ultra 等新 GPU 的出现,纪录还将继续被打破。

而老黄在现场体现传统 LLM 和推理 LLM 的区别时,也是拿着 DeepSeek-R1 来举例:

嗯,微妙,着实有点微妙。

那么除了一系列新 GPU 之外,还有什么?我们继续往下看。

推出两款个人 AI 超级计算机

首先,第一款个人 AI 超级计算机,叫做DGX Spark。

它就是老黄在今年 1 月份 CES 中发布的那个全球最小的个人 AI 超级计算机 Project Digits,这次取了个正式的名字。

DGX Spark 售价3000 美元(约 21685 元),大小和 Mac Mini 相当。

它采用的是英伟达GB10 芯片,能够提供每秒 1000 万亿次的 AI 运算,用于微调和推理最新 AI 模型。

其中,GB10 采用了 NVLink-C2C 互连技术,提供 CPU+ gpu 的相干内存模型,带宽是第五代 PCIe 的 5 倍。

值得一提的是,英伟达官网已经开发预定了哦 ~

至于第二款个人 AI 超级电腦,则是DGX Station。

DGX Station 所采用的,正是今天推出的 GB300,也是首个采用这款芯片的 AI 电腦。

其性能如下:

拥有 784GB 的相干内存空间

拥有英伟达的 ConnectX-8 超级网卡,支持高达 800Gb/s 的网络速度

拥有 Nvidia 的 CUDA-X AI 平台,可访问 NIM 微服务和 AI Enterprise

用老黄的话来说就是:

这就是 PC 应该有的样子。

This is what a PC should look like.

至于上市赶时间,则是将于今年晚些时候从华硕、BOXX、戴尔、惠普、Lambda 和美超微等厂商处推出。

△搭载 GB300 的 DGX Station 主機板

而根据英伟达官方的介绍,这两款个人 AI 超级计算机,是面向研究人员、数据科学家、AI 开发者和学生设计的。

除此之外,老黄在这届 GTC 上还涉足了以太网,推出全球首个面向 AI 的以太网网络平台——Spectrum-X。

它由英伟达的 Spectrum-4 以太网交换机和 BlueField-3 SuperNIC 共同发力,能为 AI、机器学习和自然语言处理等提供高性能支持。

相比传统以太网,Spectrum-X 可将 AI 网络性能提升 1.6 倍,提高 AI 云的电力效率。

以及还包括基于硅光学的 Spectrum-X Photonics 和 Quantum-X Photonics 网络交换平台,用于使用硅光学的超大规模数据中心。

新的网络交换平台将端口数据传输速度提升至 1.6Tb/s,总传输速度达到 400Tb/s,使数百万个 GPU 能够无缝协同工作。

还开源了一系列軟體

除了硬體,英伟达这次在軟體开源方面也有几个新动作。

其中最重磅的,当属发布NVIDIA Dyamo,一个用于加速 AI 模型推理的分布式推理服务库。

老黄将其称为 "AI 工厂的作業系統 ",核心目标在于提高推理性能的同时降低 Test-Time 算力消耗。

按照英伟达的说法,在 NVIDIA Blackwell 上使用 Dynamo 优化推理,能让 DeepSeek-R1 的吞吐量提升 30 倍。

至于背后原因,主要在于 Dynamo 可以通过动态调整 GPU 资源应对请求波动,并优化数据解除安裝到成本更低的存储设备,从而降低推理成本并提高效率。

目前 Dynamo 已完全开源,支持 PyTorch、SGLang、NVIDIA TensorRTyTM 以及 vLLM,在 GitHub 获取后即可将推理工作分配到多达 1000 个 NVIDIA GPU 芯片。

此外,英伟达还宣布开源新的 AI 推理模型—— Llama Nemotron,该系列模型也曾出现在今年 1 月的 CES 上。

据介绍,Llama Nemotron 基于开源 Llama 基础模型构建,采用英伟达最新技术和高质量数据集进行剪枝和训练,优化了计算效率和准确性。

为了直观展示其性能,老黄在大会上将它和 Llama 3.3(70B)以及 DeepSeek R1 Llama (70B)进行了对比,下图展示了它们在 Agentic 任务上的平均准确率(横轴)与每秒处理的 tokens 数量(纵轴):

可以看出,新的推理模型以 49B 参数量性能远超另外两个模型,在 Agentic 任务中表现更为突出。

目前 Nano 和 Super 模型可在 NIM 微服务中获取,Ultra 模型即将推出。

与此同时,英伟达在自动驾驶和具身智能方面也有新进展。

大会开始不久,老黄即宣布英伟达与通用汽车达成合作:

通用将在自动驾驶上使用英伟达的 AI 技术。

在这之后,英伟达正式发布了端到端自动驾驶汽车全栈综合安全系统NVIDIA Halos。

这个系统主要将 NVIDIA 的汽车硬體和軟體解决方案与尖端 AI 研究相结合,以确保从云端到车辆的自动驾驶汽车(AVs)的安全开发。

介绍过程中,老黄多次提到了 " 安全性 " 这个词,并公开声称:

我们是世界上第一家对每一行代码进行安全评估的公司

落实到具体上,Halos 系统主要在三个互补的层面提供支持:

技术层面:包括平台安全、算法安全和生态系统安全;

开发层面:涵盖设计阶段、部署阶段和验证阶段的安全防护措施;

计算层面:从 AI 训练到部署的全过程,利用三种强大的计算平台,分别是 NVIDIA DGX 用于 AI 训练,NVIDIA Omniverse 和 NVIDIA Cosmos 在 NVIDIA OVX 上运行用于模拟,以及 NVIDIA DRIVE AGX 用于部署。

到了大会的最后阶段,老黄宣布英伟达与 Google DeepMind 和 Disney Research 正合作开发下一代开源仿真物理模型 Newton。

据英伟达介绍,Newton 基于 NVIDIA Warp 构建,支持与 MuJoCo Playground 或 NVIDIA Isaac Lab 等学习框架兼容。

它主要用于机器人模拟训练,使用之后可以帮助研究人员安全、加速且低成本地训练 / 开发 / 测试 / 验证机器人控制算法和原型设计。

同时,英伟达还同步推出了  Isaac GR00T N1,号称全球首个开源的、完全可定制的人形机器人基础模型。

它采用双系统架构,灵感来自人类思考模式,包括快速思考的动作模型(System 1)和慢速思考的决策模型(System 2)。

在大会演示中,GR00T N1 能够轻松泛化常见的任务,如抓取、移动物体以及在双臂之间转移物品,或执行需要长时间推理的复杂任务。

最后的最后,老黄在谢幕之前还成功 " 召唤 " 出了配有 GR00T N1 模型的机器人—— Blue(星球大战机器人)。

虽然过程中有些不听话的 " 叛逆行为 ",但好在还是给了点老黄面子(doge)。

One More Thing

今年的 GTC 大会,除了老黄的主题演讲,还有一件事最值得期待:

那就是今年首次设立的 " 量子日 " 活动,届时老黄将与 D-Wave Quantum 和 Rigetti Computing 等十余家量子计算行业领军企业的高管同台,讨论量子计算的技术现状、潜力以及未来发展方向。

要知道今年年初时,老黄一句 " 量子计算还需 20 年才实用 ",相关概念股曾应声腰斩。

所以大家这次都在观望,老黄是否又会 " 语出惊人 ",相关探讨是否会对量子计算产业产生更大影响。

咱们继续坐等答案揭晓 ~

老黄演讲回看地址:

https://www.youtube.com/watch?v=_waPvOwL9Z8

一键三连「点赞」「转发」「小心心」

欢迎在评论区留下你的想法!

—  完  —

最后一周!2025 年值得关注的 AIGC 企业产品 报名即将截止

下一个 AI" 国产之光 " 将会是谁?欢迎申报奖项!

本次评选结果将于 4 月 16 日中国 AIGC 产业峰会上公布。

一键星标

科技前沿进展每日见

熱門排行
  • 王治郅:杨瀚森主要的问题是速度 他的速度跟不上现代篮球的节奏 王治郅:杨瀚森主要的问题是速度 他的速度跟 郟君昊 | 2025-05-05
  • 贸易战烧进电影院:特朗普拟重税打击外国电影 逼好莱坞等回美拍片 贸易战烧进电影院:特朗普拟重税打击外国电影 習又夏 | 2025-05-05
  • 贷款追高炒黄金的人后悔了!有人一天亏掉6年工资,卖掉舍不得,不卖扛不住 贷款追高炒黄金的人后悔了!有人一天亏掉6年 寸飛蘭 | 2025-05-05
  • 手机电池突破8000mAh?硅碳技术的回旋镖:「折寿」换容量 手机电池突破8000mAh?硅碳技术的回旋镖:「折 衛青柏 | 2025-05-05
  • 贷款追高炒黄金的人后悔了!有人一天亏掉6年工资,卖掉舍不得,不卖扛不住 贷款追高炒黄金的人后悔了!有人一天亏掉6年 繁綺文 | 2025-05-05
  • 任天堂对Genki提起Switch 2商标侵权诉讼,后者回应称将严肃对待 任天堂对Genki提起Switch 2商标侵权诉讼,后 郜萌運 | 2025-05-05
  • 哪吒汽车APP和官网恢复正常 知情人士:之前断网因流量欠费 哪吒汽车APP和官网恢复正常 知情人士:之前断 袁曼雁 | 2025-05-05
  • 极越汽车 CEO 夏一平名下青岛/义乌两家公司被列入经营异常 极越汽车 CEO 夏一平名下青岛/义乌两家公司 集玲琳 | 2025-05-05
  • 全国经济第一大省明确,推动组建农商联合银行 全国经济第一大省明确,推动组建农商联合银行 佼昌翰 | 2025-05-05
  • 桑保利:亚马尔有配合意识&有点像梅西 姆巴佩更专注进球&更像C罗 桑保利:亚马尔有配合意识&有点像梅西 姆巴佩 甄正浩 | 2025-05-05
  • 高露现身上海虹桥机场 黑色外套点缀亮色爱心装饰俏皮亮眼 高露现身上海虹桥机场 黑色外套点缀亮色爱 惠惠君 | 2023-05-02
  • 《歧路旅人2》:向光而生 《歧路旅人2》:向光而生 衛青柏 | 2023-05-02
  • vivo X90S曝光:处理器更新为天玑9200+ 安卓最强芯 vivo X90S曝光:处理器更新为天玑9200+ 安卓最 袁曼雁 | 2023-05-05
  • “懒癌”发病率上升,定期体检别忽视 “懒癌”发病率上升,定期体检别忽视 幸聽楓 | 2023-05-02
  • 宋慧乔获百想视后 韩素希发图手动加爱心表情庆祝 宋慧乔获百想视后 韩素希发图手动加爱心表 賁芳蕤 | 2023-05-02
  • 曹操墓,里面都有啥? 曹操墓,里面都有啥? 衛青柏 | 2023-05-02
  • 十年了,他们终于要HE! 十年了,他们终于要HE! 惠惠君 | 2023-05-07
  • 中央部署经济工作,释放5大信号 中央部署经济工作,释放5大信号 郜萌運 | 2023-05-02
  • 高德上线手机弯道会车预警功能 高德上线手机弯道会车预警功能 習又夏 | 2023-05-02
  • 陈自瑶抱病为爱女做蛋糕庆生,王浩信点赞没露面 陈自瑶抱病为爱女做蛋糕庆生,王浩信点赞没露 賁芳蕤 | 2023-05-02
  • 等比例长大的童星,李兰迪算一个 等比例长大的童星,李兰迪算一个 郟君昊 | 2023-05-02
  • 这些被抓来做实验的流浪狗,最终拯救了无数糖尿病人 这些被抓来做实验的流浪狗,最终拯救了无数糖 集玲琳 | 2023-05-02
  • 《云襄传》终于抬上来啦,男O女A让人好上头! 《云襄传》终于抬上来啦,男O女A让人好上头! 集玲琳 | 2023-05-02
  • 高端国产车:军车血统,目前电动车越野的“天花板”? 高端国产车:军车血统,目前电动车越野的“天花 謝飛揚 | 2023-05-02
  • 21家A股游戏公司2022年收入651亿 今年“游戏+AI”能否逆风翻盘? 21家A股游戏公司2022年收入651亿 今年“游 衛青柏 | 2023-05-04
  • 普京签署总统令,批准对俄刑法典相关法条的修正案 普京签署总统令,批准对俄刑法典相关法条的修 集玲琳 | 2023-05-02
  • 信用风险释放趋缓,结构性风险需重点关注 ——2023年一季度债市信用风险回顾与下阶段展望 信用风险释放趋缓,结构性风险需重点关注 — 袁曼雁 | 2023-05-02
  • 与周立波夫妇闹纠纷成老赖,唐爽被司法拘留15日 与周立波夫妇闹纠纷成老赖,唐爽被司法拘留15 寸飛蘭 | 2023-05-05
  • 解除资格!停止一切合作 解除资格!停止一切合作 佼昌翰 | 2023-05-02
  • 中银证券给予南京银行增持评级 中银证券给予南京银行增持评级 袁曼雁 | 2023-05-03
  • 3699起 联想小新mini主机上架 13代酷睿标压处理器 3699起 联想小新mini主机上架 13代酷睿标压 習又夏 | 2023-05-05
  • 前董事长被免,天山生物全面进入“中植系”时代?股价曾在一月内暴涨超400% 前董事长被免,天山生物全面进入“中植系”时 惠惠君 | 2023-05-02
  • 疯成这样,怎么还能被全网吹捧? 疯成这样,怎么还能被全网吹捧? 郜萌運 | 2023-05-02
  • 狂吼11次“让一下”!交警咆哮开道嘶吼到吐 狂吼11次“让一下”!交警咆哮开道嘶吼到吐 寸飛蘭 | 2023-05-03
  • 摩根大通收购美国第一共和银行 摩根大通收购美国第一共和银行 謝飛揚 | 2023-05-02
  • 台剧赢麻了,又来一部8.9 台剧赢麻了,又来一部8.9 衛青柏 | 2023-05-02
  • 事关农村土地承包和农民权益,《农村土地承包合同管理办法》5月1日起施行 事关农村土地承包和农民权益,《农村土地承包 郟君昊 | 2023-05-02
  • 下降45分,上涨35分!34所自划线院校复试分数线涨幅汇总 下降45分,上涨35分!34所自划线院校复试分数线 袁曼雁 | 2023-05-07
  • "三高"已盯上青少年,做好这件事是关键 "三高"已盯上青少年,做好这件事是关键 習又夏 | 2023-05-05
  • 五一档没一个能打的 五一档没一个能打的 集玲琳 | 2023-05-05
  • 恐怖韩剧下神坛,这次胆小可入 恐怖韩剧下神坛,这次胆小可入 袁曼雁 | 2023-05-05
  • 这剧是不是用ChatGPT写的呀? 这剧是不是用ChatGPT写的呀? 惠惠君 | 2023-05-02
  • 200户连夜疏散,原因让人愤怒!“损失超一亿”,官方通报 200户连夜疏散,原因让人愤怒!“损失超一亿”, 袁曼雁 | 2023-05-03
  • 性骚扰惯犯,滚出娱乐圈 性骚扰惯犯,滚出娱乐圈 謝飛揚 | 2023-05-05
  • 48岁何炅自曝已老花眼,黄磊睡前认老,《向往的生活》证实将停办 48岁何炅自曝已老花眼,黄磊睡前认老,《向往的 佼昌翰 | 2023-05-02
  • 一个《长月烬明》倒了,《狐妖》《长相思》《与凤行》…在路上了 一个《长月烬明》倒了,《狐妖》《长相思》《 惠惠君 | 2023-05-02
  • 张天爱假期晒“酷”存照 卷发披肩穿黑色吊带裙大秀好身材 张天爱假期晒“酷”存照 卷发披肩穿黑色吊 嬴覓晴 | 2023-05-02
  • 当年轻人开始不随份子钱 当年轻人开始不随份子钱 袁曼雁 | 2023-05-02
  • 毕滢用8年时间成功逼宫?曾被传已婚生子的她,不容小觑 毕滢用8年时间成功逼宫?曾被传已婚生子的她, 幸聽楓 | 2023-05-03
  • 宋慧乔获视后首次晒照,拿奖杯笑容温柔 宋慧乔获视后首次晒照,拿奖杯笑容温柔 郜萌運 | 2023-05-02

©2022 大酷樂 版權所有

隱私政策 | 服務條款 | 聯繫我們