AI算力每兩年飆3倍,HBM頻寬卻不到2倍——美光在Hot Chips 2026拋出的記憶體牆難題,為什麼短期內無解?

一個數字震驚了半導體業界:AI算力每兩年成長3倍,高階記憶體HBM頻寬每年擴展卻不到2倍。這不只是數據上的差距,這是正在發生的系統性瓶頸。

美光在Hot Chips 2026大會上,用這組對比直接攤開了整個產業最頭痛的問題——記憶體牆(Memory Wall)不只沒有改善,還在加速惡化。Hot Chips是全球半導體與處理器領域最具權威性的年度會議,每年在史丹佛大學舉行,匯集頂尖的處理器、GPU、AI加速器與記憶體設計團隊。能在這個場子發表的,不是趨勢觀察,而是硬核的技術診斷。

美光這次的診斷結論很直白:高階記憶體用於AI訓練與推論的HBM,在可見的未來仍然無解。而且這個「無解」不是供給面的產能問題,是物理與系統架構共同築起的高牆。

表象:HBM改朝換代已經夠快了,不是嗎?

如果你這兩年有在關注記憶體產業,應該對HBM的迭代節奏很有感。從HBM2e到HBM3、HBM3e,再到各家陸續公布的HBM4計畫,頻寬數字確實一直往上堆。JEDEC甚至放寬了HBM封裝的高度限制,等於默許業者用更多層堆疊來換頻寬。

看起來一切都在加速。但美光的研究指出一個殘酷的事實:記憶體業者拚命提升HBM改朝換代的速度,仍然不足以跟上AI晶片成長的速度。算力每兩年3倍,頻寬每年不到2倍——這不是誰不夠努力的問題,是成長曲線從根本上的不對稱。

換句話說,就算HBM現在每年按時換代,AI晶片還是在跑步,記憶體只是在快走。差距只會愈拉愈開。

從產業面來看,這不是單一供應商的技術瓶頸,而是整個半導體生態系必須共同面對的結構性難題。美光願意在Hot Chips這樣的場合公開點出這個問題,其實也在傳遞一個訊息:記憶體廠已經把硬體面能做的差不多都做了,接下來需要軟體架構、系統設計乃至AI模型本身一起來分攤這個壓力。這不是推卸責任,這是現實。

真相:物理限制比製程微縮更難突破

為什麼記憶體追不上邏輯晶片?一個關鍵差異在於:邏輯晶片可以持續向下微縮,記憶體卻面臨更嚴峻的物理天花板

美光點出了兩個具體的物理限制。第一,堆疊層數可以增加,但散熱問題會隨層數上升而急遽惡化。更多層等於更多熱量集中在更小的體積內,這個熱管理問題不是靠封裝技術就能解決的。第二,即便JEDEC放寬了封裝高度限制,實際量產時散熱仍然卡住瓶頸。

這跟過去35年記憶體牆的演化脈絡其實一脈相承。從intel 80486 DX2時代開始,處理器就靠晶片內倍頻技術和快取來彌補外部記憶體速度不足。但當時的解決方案,放到AI時代完全不夠用。

說真的,35年前的記憶體牆問題至今沒有真正的「解決」,只是被各種工程手段一再推遲。而AI架構的出現,等於把這個舊問題放大到一個全新的數量級。我認為半導體業者接下來必須更認真地考慮「系統級協同設計」——不是記憶體做好等CPU來用,而是從AI模型訓練的資料流特性出發,反過來定義記憶體架構。但這需要軟硬體廠商放下各自的慣性,談何容易。

各方角力:誰該為記憶體牆負責?

美光的研究結論裡藏了一個很重要的轉折:除非AI系統(軟體模型與硬體架構)對token達到效能停止或成本停止下降的飽和點,否則HBM的供給壓力不會解除

這句話的意思是,記憶體廠已經把硬體端能推的速度推到底了,接下來要看的是AI系統本身什麼時候進入「邊際效益遞減」的階段。如果AI模型持續追求更大參數量、更多token、更高精度,記憶體需求只會繼續膨脹。

但問題是,AI模型的規模成長有停下來的意思嗎?從目前的趨勢來看,沒有。每一個新發表的超大模型都在刷新參數量的天花板,而這些模型訓練與推論所消耗的HBM,正以驚人的速度吞噬晶圓產能。

更麻煩的是,HBM的產能需求同時排擠了標準型DDR5的供給。美光也點明了這個連鎖效應:與HBM競爭消耗晶圓的(LP)DDR5,價格恐怕會持續居高不下。這不是AI資料中心才要擔心的問題,是整個PC與伺服器市場都會被掃到。

如果往後推演,這個趨勢會導致一個矛盾的市場現象:AI熱潮推升HBM需求,HBM佔據先進製程產能,推高DDR5價格,最終連一般消費者的記憶體升級成本都跟著墊高。這不是危言聳聽,這是正在發生的資源排擠效應。對台灣記憶體供應鏈來說,這個格局短期內是利多,但長期來看,如果系統端不改變架構,這個瓶頸終究會反過來壓縮整個市場的成長空間。

深層影響:不只是半導體問題,是AI發展路線問題

美光這份研究的深層意涵,其實指向一個更大的命題:AI的硬體擴展路徑是否可持續

過去幾年,AI業界習慣了「更大的模型+更多的算力+更快的記憶體」這個線性擴展公式。但美光的研究暗示,記憶體這一端的成長極限正在提前到來。如果HBM的頻寬成長每年不到2倍,而算力需求每兩年3倍,那麼即使記憶體廠全力衝刺,這個缺口也只會愈來愈大。

這帶來了幾個具體的產業衝擊。第一,AI訓練的成本將持續攀升,因為記憶體瓶頸會導致運算資源的利用率無法有效提升。第二,推論階段的效能瓶頸可能比預期來得更快,影響終端AI應用的部署規模。第三,記憶體供應鏈的投資決策將變得更困難——要押注HBM還是DDR5?要擴產還是開發新架構?這些抉擇都牽動著數十億美元的資本支出。

有趣的是,美光提出的解方不是更先進的製程,而是更根本的系統級轉變:當AI系統對於token的效能或成本達到飽和點,記憶體壓力才會自然緩解。換句話說,問題的根源不在記憶體本身,在於AI模型對記憶體的「胃口」能不能被節制

未解之問:誰來打破這個僵局?

讀到這裡,你或許已經感受到這個問題的複雜度。它不是單一公司、單一技術路線可以解決的。它需要邏輯晶片廠、記憶體廠、系統設計商、AI軟體團隊共同坐下來,從最底層的資料流架構開始重新思考。

但現實是,這些參與者各有各的商業節奏與技術慣性。處理器廠商要推更快的運算核心,記憶體廠要賣更多的HBM,AI實驗室要發表更大的模型——在各自的KPI驅動下,誰有動機主動「踩煞車」?

美光在Hot Chips 2026的這場演說,與其說是提出解答,不如說是把問題赤裸裸地攤在產業面前。35年來,記憶體牆一直被工程手段推遲,但這一波AI浪潮帶來的成長曲線,可能比過去任何時候都更接近物理極限。

一個值得追蹤的指標是:AI模型參數量的成長曲線何時會趨緩?如果這個趨緩點在未來兩到三年內出現,記憶體壓力或許有機會逐步緩解;但如果模型的規模持續以目前的速度膨脹,那麼美光所說的「無解」,可能不是幾年內的事情,而是整個十年產業格局的基本設定。


下一步,你可以怎麼思考這件事?

如果你是半導體業的從業者或投資人,這份研究釋出的訊息值得認真對待:HBM的供給瓶頸不是短期產能問題,是結構性的技術限制。追蹤記憶體廠在封裝散熱與系統級協同設計上的布局,會比單純看產能擴充更有參考價值。如果你是AI應用的開發者或企業決策者,記憶體牆的持續惡化代表著:模型選擇與推論架構的優化,將愈來愈直接地影響你的總體擁有成本。現在就開始評估輕量級模型或邊緣運算的可能性,不是過度保守,是風險管理。

本文改寫整理自公開新聞來源,原始報導由自由時報發布。

常見問題 FAQ

美光在Hot Chips 2026提出的記憶體牆問題是什麼?

記憶體牆是指處理器運算速度成長遠超過記憶體資料傳輸頻寬的改善速度,導致系統效能被資料傳輸拖慢的瓶頸。美光指出AI算力每兩年成長3倍,但HBM頻寬每年擴展不到2倍,這個差距正在持續惡化。

為什麼高階記憶體HBM的供給短期內無法解決?

因為瓶頸在於物理限制與系統架構,而非單純的產能問題。HBM堆疊層數增加會導致散熱問題惡化,同時AI系統對token的需求如果沒有達到飽和點,記憶體需求只會持續膨脹,短期內沒有根本性的解方。

記憶體牆會對一般消費者造成什麼影響?

HBM消耗大量晶圓產能,會排擠標準型DDR5記憶體的供給,導致DDR5價格持續居高不下。這不只影響AI資料中心,連一般消費者的電腦升級成本也會跟著墊高。

AI算力與記憶體頻寬的成長差距有多大?

根據美光的研究數據,AI算力每兩年成長約3倍,而HBM記憶體頻寬每年擴展不到2倍。兩者的成長曲線明顯不對稱,且差距正在持續擴大。

記憶體牆問題從什麼時候就開始存在?

記憶體牆問題從35年前的intel 80486 DX2系列CPU就已經出現。當時處理器透過倍頻技術與多層次快取來解決外部記憶體速度不足的問題,但AI時代的架構讓這個舊問題被放大到全新的數量級。

※ 此篇文章由 AI 改寫或生成,內容僅供參考,可能存在錯誤或不準確之處。