硅金矿的本质:商业需求与统一范式的三重共振

2026年8月,在计算机历史博物馆举办的《The Silicon Gold Rush》对谈中,英伟达首席科学家比尔·达利(Bill Dally)与Google TPU之父诺曼·朱佩(Norman Jouppi)揭示了AI芯片竞争的本质差异。这场竞赛的基本单位,已经不是芯片,而是百亿美元级别的基础设施投入。比尔指出,定义这一轮AI革命的并非单纯的技术领先,而是三个此前从未同时出现过的条件:真实的商业需求、统一的计算范式以及几乎没有历史包袱的软件生态。与九十年代依赖政府资金且难以形成持续商业市场的超级计算机浪潮不同,如今从搜索、编程到医疗制造,整个市场对于Token、算力和推理能力的需求几乎是无限增长的。这种由真实付费客户推动的浪潮,使得AI产业能够走得更远。

在算法层面,比尔提出了一个反直觉的观点:Transformer其实是一种相对简单的应用。这里的“简单”指的是计算结构而非模型规模。传统高性能计算受限于阿姆达尔定律,大量串行代码拖慢整体速度;而Transformer的计算高度集中在矩阵乘法、Attention等少数核心算子上。只要围绕这些核心原语持续优化,整个模型就能同步获得巨大提升。这种硬件与模型的高度一致演进方向,是过去任何一次计算机革命所不具备的。

趋同演化背后的寒武纪大灭绝与架构收敛

面对为何不同公司的AI训练芯片越来越像的疑问,诺曼引入了趋同演化(Convergent Evolution)的概念。他借用生物学比喻指出,人们常关注寒武纪大爆发,却忽略了随后的寒武纪大灭绝。当年地球上出现过大量形态奇特的生物,但绝大多数最终被淘汰。今天的AI芯片产业也在经历同样的过程,无数创业公司提出的数据流、模拟计算等独特架构正在被市场快速验证。最终能留下来的,一定是真正满足大模型需求的设计。

比尔补充了历史参照:上世纪九十年代末硅谷曾有上百家图形芯片创业公司,最终仅剩英伟达和ATI两家。GPU和TPU越来越像不是谁模仿谁,而是优秀架构自然收敛的结果。尽管整体轮廓相似(巨大的计算Die、HBM、高速互连),但真正决定竞争力的并非人人可见的模块,而是藏在架构深处的细节优化。例如在数值格式上,英伟达推出的NVFP4格式通过向量缩放技术,和传统FP8相比,它能带来接近两倍的性能优势同时维持相近的精度水平。此外,自Ampere架构起引入的结构化稀疏计算,让硬件直接跳过无效计算,真正的差距来自这些围绕模型特性的深度优化。即便矩阵计算人人都有,但稀疏性等深层特性并非所有生物都会拥有。

应用驱动与平台驱动的哲学分歧:TPU vs GPU

在商业模式上,比尔坦言自己羡慕Google的一点是:TPU直到最近之前都只有一个客户,那就是Google自己。这种应用驱动的架构允许团队完全围绕内部需求做优化,无需考虑外部兼容性或平衡不同行业客户的诉求。相比之下,英伟达作为平台驱动的架构,必须成为整个AI生态的公共基础设施。尽管拥有68%的市场份额,但面对云厂商、科研机构等海量客户的不同需求,英伟达不得不在通用性和性能之间不断权衡。如果英伟达也只为自己设计芯片,也许还能做得更好。

这种分歧也体现在系统演进上。诺曼透露,从TPU v2开始,Google的目标就是训练超级计算机而非单颗AI加速器。系统从设计之初就采用3D Torus互连、液冷架构及Pod级扩展能力,没有经历传统服务器逐步加功能、不断妥协兼容性的过程。戴夫·帕特森评价道:Google在2017年前后就意识到,训练真正需要的是一台超级计算机而不是一块更快的芯片。这解释了为何行业焦点从单GPU性能转向Pod、Rack乃至Cluster。OpenAI的Jalapeno处理器虽专为特定模型设计,但在早期阶段,可编程性具有压倒性的决定性价值。两种模式无绝对优劣,却决定了完全不同的产品哲学。

系统工程时代:从卖芯片到交付超级计算机

比尔·达利给出了本场对谈最核心的结论:真正的产品是整个系统。在AI时代,客户买的不是理论峰值性能而是能立即投入生产的算力平台。英伟达从Pascal时代(2015年前后)就开始提供标准化的AI超级计算机方案,如DGX SuperPOD。按照官方架构搭完一万块GPU的集群开机就能跑,这与传统超算长达半年的Bring-up调试阶段形成鲜明对比。真正难的从来不是把一万块GPU装进机柜而是让这一万块GPU连续训练几个月不出问题。

在系统设计路线上,两家公司选择了不同路径。Google延续超算思维,采用3D Torus拓扑结合光路交换(Optical Circuit Switching)来动态绕过故障节点,强调规则化拓扑和超大规模扩展。英伟达则采取数据中心思维,在节点内部构建Clos网络采用专有超低时延互连技术以减少通信开销,而在更大规模数据中心层面使用标准以太网以兼顾开放生态。Google是超算思维统一拓扑,英伟达是数据中心思维专有低时延加标准以太网。正如《The Datacenter as a Computer》一书所述,芯片第一次变成了整个系统里的一个组件。诺曼指出,许多初创企业虽有优秀的芯片设计能力,却缺少构建超大规模系统的经验。今天复制一颗AI芯片或许还有机会但复制一套能稳定运行几万GPU的数据中心门槛要高得多。

TPU的设计哲学:将复杂性留给编译器

诺曼·朱佩回顾TPU早期设计时,强调了其核心架构原则:不要把能够在编译期完成的事情留到运行时。这一源自约翰·轩尼诗(John Hennessy)的理念,使TPU团队在架构定义初期就引入了编译器工程师。第一代TPU仅十人团队中就有两位负责编译,这意味着硬件决策旨在降低编译难度而非增加灵活性。这种设计哲学延续了RISC架构的经典原则,即把复杂性交给编译器而不是指令本身。优秀的AI处理器应尽可能让编译器提前完成调度、资源分配和数据布局,从而降低硬件复杂度并提升执行效率。这种“编译期前置”的策略是TPU区别于其他通用GPU的关键所在,它确保了硬件能够高效配合软件需求。

架构稳定性与编程模型的长期兼容

TPU之所以能保持长期的兼容性,关键在于Google选择了稳定架构、持续扩容的路线。虽然每一代TPU都会增加HBM容量、扩大片上存储并提升带宽,但整体架构并未发生根本性变化。正如诺曼所言:“Google真正保持稳定的不是晶体管数量,而是编程模型。” 对于拥有庞大训练框架和Kernel库的云平台而言,单代性能的提升远不如架构稳定重要。频繁改变架构会导致极高的迁移成本,因此Google通过不断扩展硬件资源来适应软件需求,就像PC不断增加内存却仍能运行同一套软件一样。这种策略确保了内部海量代码库的平滑过渡,避免了因硬件迭代带来的巨大工程负担。

CUDA生态构建与深度学习软件的特殊性

比尔·达利回顾了2006年CUDA发布时的挑战,当时GPU计算面对的是成千上万种传统科学计算程序,如天气模拟、流体力学等Fortran代码。英伟达投入巨大资源构建CUDA生态,包括语言、数学库及调试工具,这比设计GPU本身更为艰难。转折发生在2010年前后,英伟达与吴恩达合作开发cuDNN时发现:深度学习只有少数几个关键Kernel,大模型计算几乎集中在卷积和矩阵乘法上。比尔形容这种发现如“解脱”,因为只需优化这些核心算子,整个模型性能即可同步提升。与需要数百万行代码迁移的传统软件不同,AI软件具有持续进化的特性。每当模型首次运行,团队通常在半年内通过优化Kernel、内存访问和调度方式将其提速一倍。硬件提供性能天花板,而软件决定最终能达到多少。 > “AI软件和传统软件最大的区别在于它不是一次性交付,而是持续进化。”

护城河变浅与AI辅助工程生产力

关于软件护城河,比尔和诺曼一致认为其正在显著削弱。比尔指出:“只要你有一个软件库的规格说明,让Claude去重新实现一遍已经不是什么难事了。” 戴夫·帕特森补充道,护城河正在被沙子填满。这种变化源于AI对软件开发的赋能:只需向Claude发出指令,周末即可生成代码栈。比尔透露了AI对工程师生产力的具体提升数据:对于普通工程师,AI助手大约能带来两倍的生产力提升;对于优秀工程师,生产力甚至提升了十倍。未来的芯片设计软件可能直接由大模型对话生成,价值将转向知道该设计什么而非手动画逻辑门。比尔强调:“把AI当作你的合伙人,专注于人类独有的创新思考。” 这种生产力的飞跃正在重塑芯片设计的工作流。

前沿技术辨析:量子、模拟与边缘计算

对谈中还对多项前沿技术进行了辨析。关于量子计算,比尔认为其几乎不会颠覆AI,因为量子擅长模拟量子化学和Shor算法破解密码,而AI是海量数据、较小计算量的架构,两者优势领域不重叠。针对模拟AI芯片,比尔指出“天下没有免费的午餐”,虽然模拟电路乘法高效,但构建真实系统时会面临测试、可靠性和存储难题,数字系统中结果的对错判断在模拟中变得极难。关于边缘计算,比尔持务实态度:一般原则是能放在数据中心做的就尽量放在数据中心,因为算力成本更低;仅在延迟敏感、断网需可靠运行或数据量过大无法回传时才选择边缘计算。此外,数据中心离网发电需求旺盛,导致工业燃气轮机订单排至五年后。

给年轻工程师的建议与系统级竞争观

最后,两位专家对年轻从业者提出建议。诺曼强调:“AI会不断变化,但底层原理不会。” 他建议将时间投入计算机体系结构、编译器、操作系统和网络等基础能力,而非仅学热门框架。比尔则指出:“今天最有价值的工程师需要理解整个系统如何协同工作。” 从芯片架构、内存体系到软件栈和数据中心部署,未来创新将发生在这些交叉领域。他特别提到“真正稀缺的人才不一定是最懂AI的人,而是既懂一个行业又懂AI的人”,如生物加AI、医疗加AI等垂直领域。两位均指出CUDA和TPU是十几年持续积累的结果,“真正重要的是持续解决真正的问题”。整场对谈揭示:真正的产品从来不是一颗芯片,而是整个系统。竞争已从单颗CPU/GPU转变为涵盖FP4、稀疏计算、HBM、液冷及软件栈的AI基础设施体系。

结论

AI芯片竞争的本质已从单点硬件性能转向百亿美元级基础设施的系统工程较量。TPU凭借应用驱动与编译器前置策略,在架构稳定性及特定场景能效上具备优势;英伟达则依托CUDA生态与平台化兼容能力,构建了难以复制的软件护城河。然而,随着AI辅助编程提升十倍生产力及开源生态发展,传统软件壁垒正显著削弱。未来核心竞争力在于能否交付稳定运行的超大规模集群及跨领域系统整合能力,而非单纯的芯片设计。