硅谷101
英伟达正通过升级Omniverse与NIM软件生态打破纯硬件公司定位,试图以高昂的软件壁垒和整体拥有成本优势应对客户自研芯片与对手追赶的绝对压力。
AI-assisted summary of 英伟达GTC 2024: 绝对霸主的权力与遥远的野心 — original source. Check the original for full context.
Source published:
Detailed notes
## Background 该视频由“硅谷101”团队于2024年3月26日发布在Bilibili平台上。视频内容基于团队在2024年英伟达GTC大会上为期四天的现场参会、展会观察、论坛旁听以及对分析师的采访,旨在带领观众深入探究黄仁勋带来的新一代软硬件生态布局,审视大会激发的惊喜与未达预期的部分,并与业内专家共同解构这位AI芯片绝对霸主的野心与未来蓝图。
## TL;DR 2024年英伟达GTC大会时隔五年重回线下,黄仁勋在主题演讲中重磅发布了全新Blackwell架构GPU(包括B100、B200及GB200),通过大幅提升算力并降低能耗来延续“皇氏定律”,使水冷技术成为行业刚需。面对资本市场对硬件更新的提前消化,英伟达正加速布局软件生态,推出NVIDIA NIM和AI Foundry以深化工业数字孪生与机器人领域的融合。与此同时,英伟达在一级市场通过激进投资广拓“零亿美元市场”以巩固其绝对的话语权,大会更促成了奠定生成式AI基石的Transformer论文八位作者(除一人缺席)的历史性重聚圆桌,共同探讨AI架构的未来演进。
## Atmosphere & style 整个视频展现出一种身临其境的“云参会”视角,洋溢着科技前沿的震撼感与硅谷久违的狂热氛围。从会场外排起长龙的壮观景象,到黄仁勋独自撑满两小时全场、幽默风趣且自带震撼特效的明星式控场,视频捕捉到了英伟达处于荣耀巅峰的行业统治力。然而在狂热之余,叙事中也穿插着冷静的理性思考:无论是黄仁勋抛出软件梗时现场遭遇的“冷场”和股价震荡,还是华尔街对软件战略“走一步看一步”的摸索,亦或是Transformer作者们重聚时对技术现状的隐忧与唏嘘,都让观众在感受到科技新工业革命巨浪的同时,体会到巨头在王座之上的危机感与前路探索的深邃与复杂。
## Key takeaways - [00:00](https://www.bilibili.com/video/BV1gA4m1A7B2?t=0s) 英伟达在2024财年第四季度迎来财务巅峰,营收同比增至3.5倍,利润达9倍,股价在16个月内飙升6倍,坐上全球市值第三宝座。 - [00:00](https://www.bilibili.com/video/BV1gA4m1A7B2?t=0s) 在成为AI芯片绝对霸主的同时,英伟达正面临AMD、Intel等对手的竞争,以及谷歌、Meta、亚马逊等核心大客户纷纷自研芯片的巨大压力。 - [07:39](https://www.bilibili.com/video/BV1gA4m1A7B2?t=459s) 重磅发布下一代GPU架构“Blackwell”(包含B100、B200、GB200),通过提升芯片体积与性能,继续践行GPU推动AI性能逐年翻倍的“皇氏定律”。 - [07:39](https://www.bilibili.com/video/BV1gA4m1A7B2?t=459s) Blackwell架构在训练1.8万亿参数模型时,相比Hopper架构能将所需的GPU数量从8000个缩减至2000个,功耗从15兆瓦大幅降至4兆瓦。 - [07:39](https://www.bilibili.com/video/BV1gA4m1A7B2?t=459s) 算力飙升导致功耗急剧增加,B200单颗功耗飙升至1000瓦,使得散热技术(水冷解决方案)在数据中心中从“有了更好”变成了“必须要做”的刚需。 - [15:59](https://www.bilibili.com/video/BV1gA4m1A7B2?t=959s) 华尔街对英伟达硬件更新的预期已在供应链渠道调研中提前消化,因此Blackwell的发布属于“预期之内的好”,并未对短期股价带来超预期的惊喜刺激。 - [15:59](https://www.bilibili.com/video/BV1gA4m1A7B2?t=959s) 英伟达的真正野心在于超越硬件公司的定位,通过升级CUDA软件生态、推出NVIDIA NIM(推理微服务)和AI Foundry生态,全力抢占高价值的企业级生成式AI部署市场。 - [24:19](https://www.bilibili.com/video/BV1gA4m1A7B2?t=1459s) Omniverse平台已逐步从3D设计师协作工具演变为工业数字孪生的操作系统以及机器人的虚拟训练场,展现出AI与物理模拟深度融合的趋势。 - [24:19](https://www.bilibili.com/video/BV1gA4m1A7B2?t=1459s) 重磅发布GR00T通用人形机器人基础大模型和Jetson Thor芯片,配合基于Omniverse的Isaac Lab系统,加速布局AI机器人和自动驾驶的模拟训练生态。 - [32:39](https://www.bilibili.com/video/BV1gA4m1A7B2?t=1959s) 英伟达通过极其激进的一级市场投资疯狂加固生态护城河,持股其他公司价值同比增长超5倍达15.5亿美元,在2023年就投资了超过35家初创公司。 - [32:39](https://www.bilibili.com/video/BV1gA4m1A7B2?t=1959s) 黄仁勋通过布局目前看似市场有限但在未来可能爆发的“零亿美元市场”(如机器人、医疗、云计算),提前进行长远的技术与生态卡位。 - [32:39](https://www.bilibili.com/video/BV1gA4m1A7B2?t=1959s) 英伟达在算力市场握有绝对话语权并具备总体拥有成本(TCO)优势,其GPU供应已成为风投市场抢夺明星AI项目、科技巨头相互竞争的“硬通货”。 - [43:20](https://www.bilibili.com/video/BV1gA4m1A7B2?t=2600s) 黄仁勋亲自主持了奠定生成式AI基石的《Attention is all you need》论文作者的重聚圆桌,这八位前谷歌研究员均因大公司的创新陷阱而选择离职创业。 - [43:20](https://www.bilibili.com/video/BV1gA4m1A7B2?t=2600s) Transformer论文作者们指出当前AI模型与最初架构过于相似的隐忧,认为未来需要更好的新架构才能带领人类走向新的AI性能高原。 - [43:20](https://www.bilibili.com/video/BV1gA4m1A7B2?t=2600s) 未来的AI演进着力点在于“自适应计算”,即根据问题的难易程度合理分配算力,同时提升AI的推理决策能力以及私人数据的利用质量也是核心挑战。 - [43:20](https://www.bilibili.com/video/BV1gA4m1A7B2?t=2600s) GTC大会自2009年举办以来,已成功从一个纯粹的GPU硬件技术会议,蜕变为如今涵盖软件、数字孪生、机器人等影响人类未来可能性的庞大生态盛会。
## Detailed walkthrough ### [00:00](https://www.bilibili.com/video/BV1gA4m1A7B2?t=0s) 2024英伟达GTC大会盛况与霸主面临的挑战
硅谷101的联合创始人陈倩带大家“云参会”来到位于美国加州圣何塞(San Jose)的2024年英伟达(NVIDIA)GTC大会。此时的英伟达正处于荣耀的巅峰:其2024财年第四季度的营收是前一年同期的3.5倍,利润更是达到了惊人的9倍,股价在短短16个月内飙升了6倍,一举坐上全球市值第三的宝座。这场于3月18日至21日举办的年度盛会吸引了上万人齐聚现场。然而,在成为AI芯片绝对霸主的同时,英伟达也面临着AMD、Intel等竞争对手的步步紧逼,以及谷歌、Meta、亚马逊等大客户纷纷自研芯片的巨大压力。华尔街和硅谷都在屏息凝神,看英伟达如何向市场证明自己能守住王座,并展示未来巨大的增长潜力。
本次GTC大会时隔五年首次回归线下举行,正值生成式AI发展如火如荼、GPU“一卡难求”的黄金时期。硅谷101团队通过四天的参会、逛展、听论坛以及采访分析师,梳理出了最值得关注的四大板块:第一是创始人兼CEO黄仁勋在首日Keynote重磅演讲中传达的信号;第二是第三天由黄仁勋亲自主持的、堪称历史性时刻的圆桌论坛,邀请了奠定生成式AI基石的论文《Attention is all you need》的八位作者(当年均在谷歌,后均离职创业)首次重聚;第三是参展合作公司的软硬件落地效果展示;第四则是各大科技巨头与AI独角兽领袖在各场论坛中透露的行业风向。
首日的Keynote演讲由于参会人数爆满,地点从主会场移师至步行约20分钟车程5分钟的SAP Center。硅谷迎来了久违的晴好天气,场外观众提前三个小时就排起了长龙,其中甚至不乏举着牌子抗议AI侵犯创意和版权的示威人群。在下午一点到三点长达两小时的演讲中,黄仁勋展现了极高超的演讲与控场技巧。他没有邀请任何嘉宾,独自一人撑满全场,幽默风趣,PPT与视频特效震撼人心。在演讲尾声,他甚至将迪士尼正在研发的“Wand-E”小机器人请上台互动,萌翻全场,将气氛推向顶点。
- **英伟达财务数据**:2024财年第四季度营收为前一年同期的3.5倍,利润为前一年同期的9倍,股价在16个月内上涨6倍。 - **大会基本信息**:举办时间为3月18日-21日,地点在美国加州圣何塞市(San Jose)Convention Center及SAP Center(距离英伟达Santa Clara总部约20分钟车程)。
---
[04:59](https://www.bilibili.com/video/BV1gA4m1A7B2?t=299s) Blackwell架构发布与“皇氏定律”的延续
Keynote结束后,媒体大巴将参会者送回主会场。本次演讲最重磅的硬件更新当属名为“Blackwell”的下一代GPU架构。随着AI训练对算力需求呈指数级增长,芯片体积与性能必须大幅提升。黄仁勋在现场用生动的动画展示了Blackwell的运作原理。该系列共包括三个型号:B100、B200以及由Grace CPU和Blackwell GPU组合而成的GB200(Grace Blackwell Superchip)。这一代芯片的性能更新,继续践行着黄仁勋此前制定的“皇氏定律”(Huang's Law),即GPU将推动AI性能实现逐年翻倍。
黄仁勋在演讲中用一组具体的数据对比了新旧芯片的效率差异:如果训练一个拥有1.8万亿参数(1.8 trillion parameters)的GPT模型,使用前一代的Hopper架构,需要动用8000个GPU,消耗15兆瓦(megawatts)的电力,花费大约90天(3个月)的时间;而如果改用全新的Blackwell架构,在同样90天的时间内,仅需要2000个GPU,且功耗惊人地降至仅4兆瓦。
然而,算力飙升的背后是功耗的急剧增加。从H100的单颗约700瓦,到B200直接飙升至单颗1000瓦,热设计功耗(TDP)的提升使得散热成为了行业必须解决的痛点。业内人士指出,水冷技术(Liquid Cooling)已经从过去的“有了更好”(nice to have)变成了如今的“必须要做”(must have)。只有通过高效率的水冷解决方案,才能在维持或提高算力的同时,降低数据中心空调等制冷设备的电量消耗。
- **Blackwell系列型号**:B100、B200、GB200(Grace Blackwell Superchip)。 - **训练1.8万亿参数模型对比**: - **Hopper架构**:8000个GPU,功耗15兆瓦,耗时90天。 - **Blackwell架构**:2000个GPU,功耗4兆瓦,耗时90天。 - **功耗对比**:H100单颗功耗约700W,B200单颗功耗达1000W,水冷技术成为刚需。
---
[09:59](https://www.bilibili.com/video/BV1gA4m1A7B2?t=599s) 供应链提前消化预期,英伟达的软件野心与生态布局
除了性能提升,产能问题一直困扰着英伟达。目前市面上连配置到H200的公司都屈指可数,更不用说刚发布的B200。为此,英伟达在会上宣布将与台积电(TSMC)及Synopsys(新思科技)合作,在生产中引入英伟达的计算光刻平台,以加速芯片制造并支持下一代Blackwell GPU的生产。尽管硬件发布效果极佳,但GTC期间英伟达的股价却出现震荡。分析人士指出,由于2月份财报公布时利好已出尽,供应链的渠道调研(channel check)非常细致,市场早已提前消化(price in)了硬件更新的预期,因此硬件发布属于“预期之内的好”,并未带来超预期的惊喜。
面对AMD MI300等竞争对手的交替领先与追赶,英伟达并未停滞不前。他们在B100中融入了更大的HBM内存和内存一致性(Memory Coherency)等设计,持续拉开与对手的代际差距。然而,本次GTC上英伟达更想传达的野心在于:它绝不仅仅是一家GPU硬件公司。英伟达正全力升级其软件生态,除了早已成为牢固护城河的CUDA之外,黄仁勋正将目光投向他眼中“价值100万亿美元的新工业革命市场”。
为了帮助企业级客户更便捷地部署AI,英伟达着重推出了NVIDIA NIM(推理微服务)。NIM提供了一系列经过优化的API和基础大模型,简化了企业在生产环境中部署AI驱动应用程序的路径。此外,英伟达还升级了其AI Foundry(AI代工厂)生态,该生态包含英伟达AI基础模型、NVIDIA NeMo框架与工具,以及NVIDIA DGX云AI超级计算服务,旨在为电信、媒体、金融等各行各业定制专属的生成式AI模型。
- **产业合作**:台积电、Synopsys与英伟达合作,采用其计算光刻平台加速芯片制造。 - **NVIDIA NIM**:用于大规模部署AI模型的优化推理微服务。 - **AI Foundry三要素**:英伟达AI基础模型、NVIDIA NeMo框架与工具、NVIDIA DGX Cloud。
---
[14:59](https://www.bilibili.com/video/BV1gA4m1A7B2?t=899s) Omniverse数字孪生与机器人帝国的崛起
英伟达软件生态的另一个核心支柱是Omniverse——一个物理模拟与反馈平台。在AI机器人、无人驾驶、气候模拟、药物发现及Vision Pro构建的XR生态中,模拟物理世界互动的工作流至关重要。本次大会上,英伟达宣布推出Omniverse Cloud API,允许开发者将数字孪生(Digital Twin)技术直接集成到现有的工业设计与自动化软件中。同时,黄仁勋重点强调了基于Omniverse的机器人培训与模拟系统Isaac Lab,并发布了名为“GR00T”的机器人通用基础大模型,以及专为机器人设计的新型计算机Jetson Thor。有趣的是,黄仁勋的一对儿女均在Omniverse部门任职:女儿Madison Huang担任高级产品营销经理,儿子Spencer Huang则是机器人仿真和扩展组的产品经理,足见老黄对该业务的重视。
在大会的各场论坛中,AI与数字孪生的结合展现出了巨大威力。例如,大语言模型赋能的自动驾驶技术可以通过数字孪生在模拟器中进行更高效的训练。在AI先驱李飞飞与波士顿动力(Boston Dynamics)的分享环节中,嘉宾们一致强调了深度机器学习与模拟环境训练给机器人带来的巨大潜力。然而,尽管技术人员和学者对Omniverse及数字孪生的升级感到兴奋,普通观众和资本市场对软件部分的反应却相对冷淡。在Keynote的软件介绍环节,黄仁勋抛出的几个笑话和梗甚至遭遇了现场“冷场”,周二美股盘中英伟达的股价也随之震荡。
美股分析师在接受采访时指出,华尔街对英伟达芯片的认知已经非常充分,但对软件战略仍处于“走一步看一步”的摸索和理解阶段。前两年Omniverse刚推出时,大家普遍感到困惑,甚至以为它只是一个针对3D设计师的协作平台。但如今,它已逐步演变为工业数字孪生的操作系统(如宝马工厂、西门子、博世的工业元宇宙应用)以及机器人的虚拟训练场(Robot Training Ground)。分析师认为,这次GTC展示了AI与Omniverse的深度融合(Convergence),软件版图正变得越来越清晰。
- **机器人新品**:GR00T通用人形机器人基础大模型、Jetson Thor芯片。 - **黄仁勋子女任职**:女儿Madison Huang(Omniverse高级产品营销经理)、儿子Spencer Huang(机器人仿真和扩展组产品经理)。 - **软件应用场景**:工业元宇宙(宝马、西门子工厂规划)、自动驾驶模拟训练、机器人虚拟训练场。
---
[19:59](https://www.bilibili.com/video/BV1gA4m1A7B2?t=1199s) 华尔街的估值逻辑与英伟达的“零亿美元市场”投资版图
对于华尔街而言,将英伟达从一家“芯片公司”重新定位(Re-rating)为一家“系统与生态公司”仍需要时间。但英伟达在汽车、无人驾驶等领域的布局已初显威力,未来除了特斯拉之外的众多汽车OEM厂商,可能都将依赖英伟达的生态。正如黄仁勋在斯坦福大学演讲时所展现的霸气:“即便竞争对手的芯片免费送,也不如英伟达的划算”,因为英伟达能通过其软件和生态系统为客户带来极高的TCO(总体拥有成本)价值。
为了疯狂加固护城河并构建生态,英伟达在一级市场展开了极其激进的投资。风险投资公司Thoma Bravo的董事总经理Chamarath Palihapitiya透露,黄仁勋在探讨投资初创公司时,会非常直接且激进地询问:“我需要做什么才能建立生态系统,以便我可以销售更多的芯片和系统?”在上一财年中,英伟达持有的其他公司股份价值增长了5倍多,截至2024年1月底已达15.5亿美元。仅2023年一年,英伟达就投资了超过35家初创公司,是前一年的三倍之多,投资对象包括基础模型公司Cohere、GPU云服务商CoreWeave,以及众多机器人、自动化和医疗保健公司。
这些目前看似市场有限、但在未来可能爆发的赛道,被黄仁勋称为“零亿美元市场”(Zero Billion Dollar Markets)。老黄正像20年前布局加速计算、10年前布局CUDA一样,提前进行着遥远的野心布局。而如今,英伟达手握绝对的话语权,甚至成为了VC抢项目的“硬通货”——现在VC抢明星AI项目不看估值,而是看谁能帮项目拿到GPU的购买渠道。甲骨文(Oracle)创始人拉里·埃里森(Larry Ellison)曾回忆,他与马斯克在帕罗奥图的Nobu餐厅与黄仁勋共进晚餐时,整整一个小时都在“乞求”(begging)黄仁勋卖给他们更多的GPU。
- **英伟达投资数据**:截至2024年1月底,持股其他公司价值达15.5亿美元(同比增长超5倍);2023年投资超35家初创公司(同比增加3倍)。 - **投资代表企业**:Cohere(基础模型)、CoreWeave(云计算)。 - **核心概念**:TCO(总体拥有成本)优势、“零亿美元市场”(Zero Billion Dollar Markets)。
---
[26:00](https://www.bilibili.com/video/BV1gA4m1A7B2?t=1560s) 历史性重聚:Transformer八子与AI的未来演进
本次GTC最瞩目的焦点,莫过于黄仁勋亲自主持的《Attention is all you need》论文作者重聚圆桌论坛。这篇发表于2017年的论文提出了Transformer架构,彻底摒弃了传统的RNN和CNN,引入了注意力机制(Attention)。正是这一架构,启发了刚成立不久的OpenAI走上“堆算力、堆参数”的GPT路线,从而引爆了今天的生成式AI革命。这八位当年的谷歌研究员,堪称生成式AI的“开国元勋”。
令人唏嘘的是,Transformer虽然诞生于谷歌,但由于大公司的创新陷阱,内部推进缓慢,这八位研究员最终全部选择“叛逃”谷歌,投身创业大潮。在硅谷,人们渴望主导创新,而黄仁勋所说的“黄金十年”更是提供了绝佳的机遇。除了一位女性作者Niki Parmar因故缺席外,其余七位作者首次在现实中的同一个房间里聚首(此前他们多为线上协作)。
黄仁勋在现场一一介绍了这七位传奇人物及其创立的公司: 1. **Noam Shazeer**:AI角色扮演对话公司Character.ai的联合创始人兼CEO。 2. **Aiden Gomez**:基础模型AI独角兽Cohere的联合创始人兼CEO。 3. **Ashish Vaswani**:与Niki Parmar联合创立了Essential AI,开发利用AI执行企业职能的“企业大脑”技术。 4. **Illia Polosukhin**:联合创立了利用区块链为AI赋能的Near Protocol。 5. **Llion Jones**:在日本东京创立了专注于基础模型新架构的Sakana AI。 6. **Jakob Uszkoreit**:Inceptive的联合创始人兼CEO,将AI用于mRNA疫苗开发(英伟达亦有投资)。 7. **Lukasz Kaiser**:加入了OpenAI。黄仁勋调侃他是八人中“唯一一个还在做苦力写代码的工程师”。
在讨论中,作者们表达了对技术现状的隐忧。他们认为,目前的AI模型与最初的Transformer架构依然过于相似,世界需要比Transformer更好的架构来带人类走向新的性能高原。同时,七位作者一致指出,未来的着力点在于“自适应计算”(Adaptive Computation),即根据问题的难易程度合理分配算力(例如,不应该用1万亿参数的算力去解答“2+2=4”这样简单的计算)。此外,提升AI的推理与自主决策能力、提高训练数据的质量与私人数据的利用,将是下一步发展的核心挑战。
GTC的全称是“GPU Technology Conference”,自2009年第一届举办以来,它已从一个纯粹的硬件技术会议,演变为如今涵盖软件、数字孪生、机器人等影响人类未来可能性的庞大生态盛会。
- **论文背景**:2017年发表的《Attention is all you need》,奠定了Transformer架构。 - **圆桌嘉宾及去向**: - Noam Shazeer (Character.ai) - Aiden Gomez (Cohere) - Ashish Vaswani (Essential AI) - Illia Polosukhin (Near Protocol) - Llion Jones (Sakana AI) - Jakob Uszkoreit (Inceptive) - Lukasz Kaiser (OpenAI) - Niki Parmar (Essential AI,本次缺席)
## Notable quotes > [04:59](https://www.bilibili.com/video/BV1gA4m1A7B2?t=299s) 皇氏定律 — 黄仁勋
> [09:59](https://www.bilibili.com/video/BV1gA4m1A7B2?t=599s) 价值100万亿美元的新工业革命市场 — 黄仁勋
> [04:59](https://www.bilibili.com/video/BV1gA4m1A7B2?t=299s) 有了更好 — 业内人士
> [04:59](https://www.bilibili.com/video/BV1gA4m1A7B2?t=299s) 必须要做 — 业内人士
> [09:59](https://www.bilibili.com/video/BV1gA4m1A7B2?t=599s) 预期之内的好 — 分析人士
> [19:59](https://www.bilibili.com/video/BV1gA4m1A7B2?t=1199s) 即便竞争对手的芯片免费送,也不如英伟达的划算 — 黄仁勋
> [19:59](https://www.bilibili.com/video/BV1gA4m1A7B2?t=1199s) 我需要做什么才能建立生态系统,以便我可以销售更多的芯片和系统? — 黄仁勋
> [19:59](https://www.bilibili.com/video/BV1gA4m1A7B2?t=1199s) 零亿美元市场 — 黄仁勋
> [19:59](https://www.bilibili.com/video/BV1gA4m1A7B2?t=1199s) 乞求 — 拉里·埃里森
> [26:00](https://www.bilibili.com/video/BV1gA4m1A7B2?t=1560s) 黄金十年 — 黄仁勋
> [26:00](https://www.bilibili.com/video/BV1gA4m1A7B2?t=1560s) 唯一一个还在做苦力写代码的工程师 — 黄仁勋
> [26:00](https://www.bilibili.com/video/BV1gA4m1A7B2?t=1560s) 自适应计算 — Transformer八子
## Mentioned 硅谷101, 陈倩, 英伟达, 黄仁勋, AMD, Intel, 谷歌, Meta, 亚马逊, 迪士尼, Wand-E, Blackwell, B100, B200, GB200, Grace CPU, Hopper, H100, H200, 台积电, Synopsys, MI300, CUDA, NVIDIA NIM, AI Foundry, NVIDIA NeMo, NVIDIA DGX, Omniverse, Omniverse Cloud API, Isaac Lab, GR00T, Jetson Thor, Madison Huang, Spencer Huang, 李飞飞, 波士顿动力, 宝马, 西门子, 博世, 特斯拉, Thoma Bravo, Chamarath Palihapitiya, Cohere, CoreWeave, 甲骨文, 拉里·埃里森, 马斯克, Attention is all you need, Transformer, RNN, CNN, OpenAI, GPT, Niki Parmar, Noam Shazeer, Character.ai, Aiden Gomez, Ashish Vaswani, Essential AI, Illia Polosukhin, Near Protocol, Llion Jones, Sakana AI, Jakob Uszkoreit, Inceptive, Lukasz Kaiser
[Source](https://www.bilibili.com/video/BV1gA4m1A7B2)