7月26日，2025世界人工智能大會(huì)（WAIC）在上海世博中心啟幕，華為首次線(xiàn)下展出昇騰384超節(jié)點(diǎn)，即Atlas 900 A3 SuperPoD，支持單集群300PFLOPS算力輸出。

據(jù)介紹，該產(chǎn)品基于超節(jié)點(diǎn)架構(gòu)，采用全對(duì)等（Peer-to-Peer）UB 總線(xiàn)，將384 顆 NPU + 192 顆鯤鵬 CPU 通過(guò)無(wú)阻塞 Clos 架構(gòu)互聯(lián)，單跳時(shí)延 <200 ns，帶寬 392 GB/s，比傳統(tǒng) RoCE 提升 15 倍。3168 根光纖 + 6912 個(gè) 400 G 光模塊實(shí)現(xiàn)百納秒級(jí)互聯(lián)，支持 2 m 以上長(zhǎng)距部署，突破了銅纜距離限制。

這些大帶寬低時(shí)延互聯(lián)技術(shù)，解決了昇騰384超節(jié)點(diǎn)集群內(nèi)計(jì)算、存儲(chǔ)等各資源之間的通信瓶頸，通過(guò)系統(tǒng)工程的優(yōu)化，實(shí)現(xiàn)資源的高效調(diào)度，讓超節(jié)點(diǎn)像一臺(tái)計(jì)算機(jī)一樣工作。具體性能上，昇騰384超節(jié)點(diǎn)單集群 BF16 稠密算力 300 PFLOPs，約為英偉達(dá) GB200 NVL72 的 1.7 倍。

能效比（MFU）從行業(yè)平均 30% 提升到 45% 以上，已用于訓(xùn)練 7180 億參數(shù)的盤(pán)古 Ultra MoE 大模型。

值得一提的是，在今年5月的鯤鵬昇騰開(kāi)發(fā)者大會(huì)上，華為推出了昇騰超節(jié)點(diǎn)（CloudMatrix 384），成功實(shí)現(xiàn)業(yè)界最大規(guī)模的384卡高速總線(xiàn)互聯(lián)。昇騰超節(jié)點(diǎn)具備超大帶寬、超低時(shí)延、超強(qiáng)性能的三大優(yōu)勢(shì)，包括多款訓(xùn)練和推理產(chǎn)品，基于超節(jié)點(diǎn)創(chuàng)新架構(gòu)，更好的滿(mǎn)足模型訓(xùn)練和推理對(duì)低時(shí)延，大帶寬，長(zhǎng)穩(wěn)可靠的要求。

本月初，華為云官微通過(guò)一段視頻展示了CloudMatrix 384超節(jié)點(diǎn)算力集群，并表示該超節(jié)點(diǎn)算力集群可實(shí)現(xiàn)業(yè)界最大單卡推理吞吐量——2300Tokens/s；業(yè)界最大集群算力——16萬(wàn)卡，萬(wàn)卡線(xiàn)性度高達(dá)95%；云上確定性運(yùn)維-40天長(zhǎng)穩(wěn)訓(xùn)練、10分鐘快速恢復(fù)。

華為云表示，新一代昇騰AI云服務(wù)，是最適合大模型應(yīng)用的算力服務(wù)。

簡(jiǎn)單來(lái)說(shuō)，華為CloudMatrix并非簡(jiǎn)單的“堆卡”，而是通過(guò)高帶寬全對(duì)等互聯(lián)（Peer-to-Peer）來(lái)設(shè)計(jì)，這也是CloudMatrix 384硬件架構(gòu)的一大創(chuàng)新。

傳統(tǒng)的AI集群中，CPU相當(dāng)于公司領(lǐng)導(dǎo)的角色，NPU等其它硬件更像是下屬，數(shù)據(jù)傳輸?shù)倪^(guò)程中就需要CPU審批和簽字，效率就會(huì)大打折扣。

但在CloudMatrix384中，CPU和NPU等硬件更像是一個(gè)扁平化管理的團(tuán)隊(duì)，它們之間的地位比較平等，直接通過(guò)UB網(wǎng)絡(luò)通信直接對(duì)話(huà)，效率自然就上來(lái)了。

今年4月份，國(guó)際知名半導(dǎo)體研究和咨詢(xún)機(jī)構(gòu)SemiAnalysis發(fā)布專(zhuān)題報(bào)道稱(chēng)，華為云最新推出的AI算力集群解決方案CloudMatrix 384（簡(jiǎn)稱(chēng)CM384）憑借其顛覆性的系統(tǒng)架構(gòu)設(shè)計(jì)與全棧技術(shù)創(chuàng)新，在多項(xiàng)關(guān)鍵指標(biāo)上實(shí)現(xiàn)對(duì)英偉達(dá)旗艦產(chǎn)品GB200 NVL72的超越，標(biāo)志著中國(guó)在人工智能基礎(chǔ)設(shè)施領(lǐng)域?qū)崿F(xiàn)里程碑式突破。

據(jù)SemiAnalysis披露，華為云CM384基于384顆昇騰芯片構(gòu)建，通過(guò)全互連拓?fù)浼軜?gòu)實(shí)現(xiàn)芯片間高效協(xié)同，可提供高達(dá)300 PFLOPs的密集BF16算力，接近達(dá)到英偉達(dá)GB200 NVL72系統(tǒng)的兩倍。此外，CM384在內(nèi)存容量和帶寬方面同樣占據(jù)優(yōu)勢(shì)，總內(nèi)存容量超出英偉達(dá)方案3.6倍，內(nèi)存帶寬也達(dá)到2.1倍，為大規(guī)模AI訓(xùn)練和推理提供了更高效的硬件支持。

報(bào)道分析稱(chēng)，盡管單顆昇騰芯片性能約為英偉達(dá)Blackwell架構(gòu)GPU的三分之一，但華為通過(guò)規(guī)模化系統(tǒng)設(shè)計(jì)，成功實(shí)現(xiàn)整體算力躍升，并在超大規(guī)模模型訓(xùn)練、實(shí)時(shí)推理等場(chǎng)景中展現(xiàn)更強(qiáng)競(jìng)爭(zhēng)力。

SemiAnalysis也指出，華為的工程優(yōu)勢(shì)不僅體現(xiàn)在芯片層面，更在于系統(tǒng)級(jí)的創(chuàng)新，包括網(wǎng)絡(luò)架構(gòu)、光學(xué)互聯(lián)和軟件優(yōu)化，使得CM384能夠充分發(fā)揮集群算力，滿(mǎn)足超大規(guī)模AI計(jì)算需求。

此次華為云CloudMatrix 384的發(fā)布，標(biāo)志著中國(guó)在AI計(jì)算系統(tǒng)領(lǐng)域已具備與國(guó)際巨頭正面競(jìng)爭(zhēng)的實(shí)力。

SemiAnalysis在報(bào)道中特別指出，華為的規(guī)模化解決方案“領(lǐng)先于英偉達(dá)和AMD目前市場(chǎng)上的產(chǎn)品一代”，并認(rèn)為中國(guó)在AI基礎(chǔ)設(shè)施上的突破將對(duì)全球AI產(chǎn)業(yè)格局產(chǎn)生深遠(yuǎn)影響。