AI晶片競賽規則改寫!輝達NVHBM頻寬飆升30%,AWS為何搶頭香?

根據輝達最新發布的技術白皮書與官方公告,新一代高頻寬記憶體技術 NVHBM 正式亮相。這項技術最關鍵的數字有三個:記憶體頻寬提升 30%、HBM 功耗降低 15%、XPU 運算晶粒面積釋放最高 25%。這些不是漸進式的改良,而是從架構層級徹底翻轉了 AI 晶片的設計邏輯。

當 AI 模型從千億參數往兆級規模推進,記憶體頻寬早已取代運算峰值,成為制約效能的真正瓶頸。輝達這一步,與其說是技術發表,不如說是對整個半導體產業發出的一個明確信號:接下來的 AI 軍備競賽,比的將是誰能把系統整合做到極致,而不只是誰的晶片電晶體數目最多。

記憶體控制器大搬家:25% 面積釋放的背後算計

傳統 HBM 架構把記憶體控制器放在 XPU 運算晶粒上,這在晶片設計上是「合理」的選擇,因為控制器離運算單元越近,延遲越低。但隨著 AI 運算單元數量暴增,這個設計選擇的代價也越來越明顯:記憶體控制器吃掉的面積,本可以用來塞進更多運算核心或更大的快取。

NVHBM 的顛覆之處,在於輝達把自行開發的客製化記憶體控制器從 XPU 搬到了 3D HBM 堆疊中的 Base Die。用白話文說,就是把原本佔用核心晶片空間的「管理層」移到了記憶體模組內部,讓 XPU 晶粒騰出最多四分之一的面積,全部留給運算資源使用。

這個架構調整的意義,不能只用「省空間」來理解。從產業面來看,輝達等於是重新定義了 XPU 與 HBM 之間的權責分工。過去記憶體控制器是 XPU 的附屬功能,現在它變成 HBM 模組的內建能力。這對未來 AI 晶片的設計分工會產生深遠影響——晶片業者可以把更多精力集中在運算架構的優化,記憶體控制的專業則交給 HBM 供應鏈去處理。如果這個架構成為主流,我們可能會看到 XPU 設計與記憶體設計進一步脫鉤,各自往專業化的方向深化。

這個「搬家」的動作,實際上釋放的不只是物理空間,更是設計彈性。輝達在公告中明確表示,NVHBM 採用與未來 GPU 相同的相關技術,這意味著輝達內部對這個新架構的定位,不是一次性實驗,而是長期戰略方向的定錨。

標準化背後的生態系佈局:不只是賣技術,是賣規則

輝達此次同時宣布,將建立標準化的 NVHBM 實作方式,並由多家記憶體供應商驗證及提供產品。這個動作看似低調,實際上是整個公告中戰略意圖最強烈的一環。

過去,AI 晶片業者面對不同記憶體供應商時,必須各自進行整合與驗證,這是工程上極其耗時且昂貴的環節。輝達把 NVHBM 的實作方式標準化之後,等於是建立了一套「通用介面」,讓各家記憶體廠都能按照同一套規範生產,而 AI 晶片開發者只要對接這套標準即可。

根據半導體產業的經驗法則,一套新技術要從「可行性驗證」走到「大規模量產」,通常需要 18 到 24 個月的時間。輝達的標準化策略,目標就是要把這段時間大幅壓縮。對於需要快速迭代的 AI 晶片新創或雲端服務商來說,縮短從設計到導入市場的時間,有時比效能的絕對數字更具商業價值

輝達並未透露具體合作記憶體廠商的名單,但從其「多家供應商驗證」的表述來看,三星、SK 海力士、美光等既有 HBM 供應鏈夥伴,幾乎可以確定都在這條路上。這個策略與輝達過去在 GPU 生態系中建立的「CUDA 護城河」有異曲同工之妙——不是封閉自用,而是開放標準,但標準由我來訂

AWS 的 Annapurna Labs 為何搶頭香?

亞馬遜旗下 Annapurna Labs 將成為首家導入 NVHBM 的合作業者,這個消息比 NVHBM 本身更耐人尋味。Annapurna Labs 的下一代 Trainium 晶片將從 Trainium4 開始支援 NVLink Fusion,這代表亞馬遜自行開發的 AI 晶片與輝達 GPU 將能夠透過共同的機架級架構進行整合

Annapurna Labs 與輝達的合作並非從零開始。根據輝達的公告,雙方早在 NVLink Fusion 平台就已建立合作基礎,這次 NVHBM 的導入只是延續同一條技術路徑。但關鍵在於:Trainium4 將運用的 NVLink Scale-Up 架構,讓 AWS 的客製化晶片可以直接接入輝達的機架級平台,這在 AI 基礎設施的部署上是一個極具戰略意義的節點。

從 AWS 的角度來看,這個合作有一個很實際的商業邏輯。AWS 是全球最大的雲端服務商,同時也是輝達 GPU 的最大買家之一。如果 AWS 能在自家機房同時部署 Trainium 和輝達 GPU,並透過共同的機架架構讓兩者協同運作,那 AWS 在 AI 算力調度上的靈活性將大幅領先其他雲端業者。對輝達來說,讓 AWS 的客製化晶片「合法」地接進自己的生態系,是一種務實的妥協,也是擴大 NVLink Fusion 平台影響力的捷徑。

從技術公告的語境來看,輝達對 NVLink Fusion 的定位已經非常明確——這是一個開放給客製化 AI 晶片業者的機架級平台,合作業者可以使用 NVLink Chiplet、NVLink-C2C、NVLink Switch 以及 MGX 系統與機架等技術,將自行設計的 XPU 或 CPU 接入輝達的機架級基礎設施。

換句話說,輝達正在做的事情,不是把客製化晶片當成競爭對手來消滅,而是建立一套「基礎設施標準」,讓所有想自己設計 AI 晶片的業者,最終都必須在某種程度上與輝達的生態系相容。這套策略如果成功,輝達的影響力將從 GPU 銷售延伸到整個 AI 機房的架構設計層級。

數據背後的啟示

從輝達這次的技術發布,可以提煉出三個層次的產業訊號。第一,AI 晶片的效能競爭已經從「單晶片算力」轉向「系統級整合效率」,記憶體頻寬和功耗將比運算峰值更常出現在技術規格表的標題位置。第二,輝達正在用標準化的方式,把自家的互連技術與機架架構變成 AI 基礎設施的「通用語言」,這比單純賣 GPU 更能建立長期的技術鎖定效應。第三,AWS 的率先導入證明了雲端巨頭與晶片供應商之間的關係正在從「買賣」走向「共構」——彼此都在對方的技術路徑上押注。

對臺灣的半導體供應鏈來說,NVHBM 的出現是一個必須關注的訊號。HBM 的 Base Die 製程與先進封裝技術密切相關,而這正是臺灣封測廠與晶圓代工廠的強項。如果 NVHBM 的標準化推動更多 AI 晶片業者採用這個架構,對於先進封裝產能的需求只會繼續往上走。但相對的,記憶體控制器從 XPU 移出,也代表 XPU 設計的複雜度會往 HBM 端轉移,臺灣的記憶體控制 IC 設計業者是否能在這波架構變革中找到新的著力點,是接下來值得追蹤的動向。

輝達在公告中並未給出具體的產品問世時間表,但從「多家記憶體供應商驗證」的進度來推估,NVHBM 的商用化時程可能落在未來一到兩年內。對於正在規劃下一代 AI 基礎設施的企業來說,現在已經到了需要把 NVHBM 納入技術評估清單的時候。

AI 晶片產業的競賽規則正在被改寫,而改寫規則的人,總是比遵守規則的人多那麼一點優勢。

本文改寫整理自公開新聞來源,原始報導由科技新報發布。

常見問題 FAQ

NVHBM 跟現有的 HBM4E 有什麼具體差異?

NVHBM 最大的差異在於將記憶體控制器從 XPU 晶粒移到 HBM 的 Base Die,而標準 HBM4E 仍將控制器配置在 XPU 上。這項架構調整讓 NVHBM 在記憶體頻寬上最高提升 30%,HBM 功耗降低 15%,並釋放 XPU 運算晶粒最高 25% 的面積供運算單元使用。

AWS 的 Annapurna Labs 為什麼是首家導入 NVHBM 的業者?

Annapurna Labs 與輝達在 NVLink Fusion 平台已有既有的合作基礎,雙方延續此技術路徑進一步導入 NVHBM。AWS 下一代 Trainium 晶片將從 Trainium4 開始支援 NVLink Fusion,讓 AWS 自行開發的 AI 晶片能與輝達 GPU 透過共同的機架級架構整合,提升 AI 工作負載的部署彈性與效率。

NVHBM 的標準化對 AI 晶片開發者有什麼好處?

輝達計畫建立標準化的 NVHBM 實作方式,由多家記憶體供應商驗證提供產品。這能大幅降低 AI 晶片業者在不同記憶體供應商之間進行整合驗證的工程投入,縮短客製化 XPU 從設計到導入市場的時間,對需要快速迭代產品的晶片開發者是顯著的競爭優勢。

※ 此篇文章由 AI 改寫或生成,內容僅供參考,可能存在錯誤或不準確之處。