AI算力江湖,NVIDIA一家独大的日子可能要被打破一个缺口了。
11月4日,AI芯片公司SambaNova宣布与服务器巨头Supermicro(超微)达成战略合作:首批规划1万颗SN50 RDU芯片,双方共建并销售AI分离式推理系统——一套把NVIDIA GPU和SambaNova的RDU混在一起用的方案。
这不是简单的“又一家AI芯片公司找了个服务器合作伙伴”。它的野心写在架构里:让GPU和RDU各干各最擅长的事,用异构组合正面挑战NVIDIA在推理市场的统治地位。
1万颗SN50:先看这次合作的体量
首批1万颗芯片,这个数字值得细品。在AI芯片行业,“宣布合作”很容易,“真下单”很难。1万颗SN50 RDU的规划量,说明这不是意向书、不是联合实验室,而是实打实的备货和销售计划。
Supermicro是全球最大的AI服务器供应商之一,它的渠道和交付能力是SambaNova最缺的东西。SambaNova有芯片技术,但缺的是把芯片变成“客户能买到的整机”的能力。这次合作是典型的互补:一个出芯片,一个出系统、渠道和品牌背书。
对Supermicro来说,动机也很直接:它的客户一直在问“除了NVIDIA,还有没有别的选择”。多一个有竞争力的方案,Supermicro就能多做一门生意,还能在跟NVIDIA谈判时多一张牌。
GPU管读、RDU管写:分离式推理的精妙分工
这套系统的技术核心叫“分离式推理”(disaggregated inference),分工非常清晰:NVIDIA GPU负责prefill(读提示词、理解问题),SN50 RDU负责decode(一个字一个字地写回答)。
为什么这样分?因为大模型推理的两个阶段,计算特性完全不同。prefill是 compute-heavy(计算密集),GPU的并行算力正合适;decode是 memory-heavy(访存密集),一个token一个token地生成,GPU的大部分算力其实在空转,纯属浪费。RDU(可重构数据流单元)的架构天生适合这种流式的数据流模式,能效比远高于GPU。
打个比方:GPU是短跑冠军,爆发力无敌;RDU是马拉松选手,耐力惊人。以前是让短跑冠军去跑马拉松,现在终于让专业的人干专业的事了。
不用拆机房:这才是打动客户的关键
官方特别强调了一点:RDU不需要极端机架功率密度,可以在现有数据中心部署,还能延长旧GPU的使用寿命。
这句话是说给CFO和数据中心运维听的。现在部署NVIDIA最新GPU的一个巨大隐性成本是机房改造——动辄上百千瓦的机架功率密度,老数据中心的供电和散热根本扛不住,改造费用动不动就是几千万。而RDU方案号称“现有数据中心即插即用”,这直接砍掉了一大块部署成本。
“延长旧GPU使用寿命”更是妙手。很多云厂商手里有大量上一代GPU,卖二手不值钱、跑新模型又吃力。分离式架构让旧GPU继续干它擅长的prefill,把decode交给RDU,整套系统的性能上来了,旧卡不用提前报废。这对云厂商的资产负债表是实实在在的利好。
先打NeoCloud和主权云:客户策略很聪明
双方的目标客户排序也很有讲究:先锁定NeoCloud(新兴AI云厂商)和主权云,再扩展到企业自建数据中心。
为什么是这两类?NeoCloud们的特点是:缺NVIDIA的货、被CUDA生态绑架得还没那么深、对成本极度敏感。它们最有动力尝试异构方案。主权云(各国政府主导的AI基础设施)的特点是:政治上希望供应链多元化、不把鸡蛋放在一个篮子里,预算相对充足,愿意为“自主可控”付溢价。
这两类客户都是“最容易被说服”的群体。先拿下他们做出标杆案例,再去啃最保守的企业数据中心——这是教科书式的市场切入策略。
SN50:SambaNova的第五代RDU,专为推理而生
SN50是SambaNova的第五代可重构数据流单元,专门为大模型高性能推理设计。RDU这个技术路线,SambaNova已经做了很多年——可重构意味着芯片的数据流路径可以根据模型结构动态调整,不像GPU是固定架构“通吃”,也不像ASIC是一次流片定死。
RDU的定位,本质上是在“GPU的通用灵活”和“ASIC的极致能效”之间找平衡点。历史证明,纯ASIC路线(如早年的很多AI芯片创业公司)死在了“模型迭代太快、芯片跟不上”上;RDU的可重构特性,理论上能更好地跟上大模型架构的快速变化。
当然,理论是理论。RDU路线之前一直不温不火,核心问题是软件生态——CUDA的护城河太深了。这次SambaNova学聪明了:不跟NVIDIA拼通用计算,只啃decode这一段,用“混合架构”绕开生态短板。这是个务实的选择。
写在最后:挑战NVIDIA,从来不是一颗芯片的事
双方宣称2027年可交付“远超常规”的高性能推理容量——没有具体数字和对比基准,我更愿意把它理解为“战略宣示”而非“性能承诺”:目标是在2027年成为推理算力市场不可忽视的力量。能不能做到,看1万颗SN50的实际交付、实测性能,以及有没有标杆客户站出来背书。
实话实说,过去几年挑战NVIDIA的AI芯片公司,倒下的比站起来的多。教训一致:光有芯片不够,要有系统、软件、渠道和愿意陪你踩坑的客户。
SambaNova这次最“不一样”的不在芯片,而在打法:不正面硬刚GPU、用分离式架构差异化、拉Supermicro补渠道、先啃最容易转化的客户。这套“承认现实、迂回包抄”的打法,比“我们要做NVIDIA杀手”的口号务实得多。
NVIDIA护城河依然深不可测,1万颗SN50只是开始。但推理市场的蛋糕足够大,大到容得下第二种架构。2027年系统真正交付时,我们才能知道这是异构时代的开端,还是一次漂亮的营销。
有一点确定:对买算力的人来说,多一个选择永远是好事。