算力每兩年漲3倍、HBM頻寬追不上!美光親口認了「記憶體牆」短期無解,AI硬體瓶頸在哪?

「記憶體牆」這個困擾半導體業超過三十年的老問題,在AI浪潮席捲下非但沒有緩解,反而以驚人速度惡化中。美光(Micron)在2026年Hot Chips大會上發布的最新研究,正式戳破了市場對高階記憶體供給好轉的期待——除非AI系統在token處理效能或成本上達到飽和點,否則HBM的供需失衡,短期內無藥可醫。

一場在史丹佛舉行的半導體年會,為何讓業界繃緊神經?

Hot Chips,這個每年固定在美國史丹佛大學舉行的半導體與處理器頂級年會,向來是全球晶片設計團隊亮出底牌的最高殿堂。今年美光在會場上沒有帶來振奮人心的製程突破,反而給出了一個相當沉重的診斷:AI算力每兩年成長三倍,但HBM頻寬每年擴展速度卻不到兩倍,這兩條曲線的差距,正是「記憶體牆」持續崩塌的具體軌跡。

所謂記憶體牆,白話來說就是處理器跑得太快,但資料從記憶體搬過來的速度根本跟不上。這問題其實一點都不新——早在三十五年前的intel 80486 DX2系列CPU時代,工程師就必須靠晶片內倍頻技術和層層快取(Cache)來掩蓋外部記憶體太慢的尷尬。只是當年沒人料到,半導體走了三十幾年,這個老病灶竟然會在AI時代變成致命傷。

HBM堆疊層數再高,也躲不過物理鐵拳

美光這次的研究等於把業界最不想面對的現實攤在陽光下:即便HBM改朝換代的速度已經被操到極限,記憶體廠拚命推升堆疊層數、JEDEC甚至放寬封裝高度限制來給業者更多空間,但散熱問題就像一道無法跨越的鐵柵欄。層數越多,熱就越多,而熱就是訊號完整性與可靠性的天敵——這不是製程微縮能解決的事,這是物理定律在說話

換個角度想,邏輯晶片可以靠更小的電晶體繼續往前推進,但記憶體的特性決定了它無法複製同樣的劇本。美光這番表態,等於承認了半導體產業過去「製程萬能」的信仰,在記憶體這塊正面臨嚴肅考驗。有趣的是,問題最嚴重的恰恰是AI訓練與推論最倚賴的HBM,這表示整個AI產業的硬體地基,其實比大家想像的更脆弱。

編輯觀點:美光這份研究真正該被注意的,不是「HBM供貨緊張」這種大家早就知道的事,而是它點出了一個結構性轉折——過去業界總認為記憶體瓶頸是「製程落後」的問題,只要砸錢做新技術就能解;但美光現在告訴你,物理限制已經讓單純的硬體競賽走到盡頭。從產業面來看,接下來真正有意義的戰場不會只在記憶體廠之間,而是會往上移動到系統架構與軟體演算法。誰能設計出更聰明、更省頻寬的AI模型,誰才是下一階段的贏家。對投資人來說,與其盯著HBM產能數字,不如開始關注那些有能力從架構面「偷」頻寬的系統公司——因為美光已經暗示,硬體端的努力,短期內真的不夠用。

救世主等不到,只好回頭看AI系統自己爭氣點

美光在結論處給了一個耐人尋味的轉折:除非AI系統(包含軟體模型與硬體架構)在token處理上達到「效能停止成長」或「成本停止下降」的飽和點,否則高階記憶體的供給壓力永遠不會解除。這段話翻譯成白話文就是——如果AI模型繼續像現在這樣愈做愈大、token愈吐愈多,那記憶體再多都不夠用

這背後有個殘酷的數學:AI算力每兩年成長三倍,但HBM頻寬擴充跟不上,這表示單位算力能分配到的頻寬正在快速萎縮。即便記憶體廠再怎麼加速推新產品,這個缺口只會愈拉愈大。而雪上加霜的是,與HBM共用晶圓資源的(LP)DDR5,價格恐怕也會因為產能排擠而持續居高不下——這不是單一零組件的問題,而是整個伺服器成本結構都會被牽動。

展望與影響:記憶體牆不會消失,但我們可以換條路走

美光這份研究給產業最大的啟示,或許不是「HBM不夠用」這個結果,而是它強迫所有人正視一個事實:過去靠硬體製程解決一切問題的時代,已經結束了。接下來幾年,半導體業者必須跟系統設計師、軟體工程師更緊密地合作,從架構面尋找「省頻寬」的方法,而不是一味要求記憶體廠變魔術。

對台灣供應鏈來說,這既是警訊也是機會。記憶體測試、封裝、散熱材料等領域的技術升級壓力會更大,但同時,那些能夠提供系統級記憶體優化解決方案的業者,將會迎來新的成長動能。美光已經把球拋出來了,接下來就看整個生態系怎麼接住這顆燙手山芋。

這場AI硬體競賽的下一回合,比的將是誰更懂得「節省」——不是省電,是省頻寬。

本文改寫整理自公開新聞來源,原始報導由自由時報發布。

常見問題 FAQ

什麼是記憶體牆?為什麼AI時代特別嚴重?

記憶體牆指的是處理器運算速度遠超過記憶體資料傳輸速度,導致系統效能被資料搬運拖累的瓶頸。AI時代因為模型參數爆炸、token處理量暴增,加上算力每兩年成長三倍而HBM頻寬每年擴充不到兩倍,讓這個問題急遽惡化。

HBM產能短期內真的無法增加嗎?

短期內確實無解。美光研究明確指出,即便堆疊層數能提升,散熱物理限制仍是一大阻礙,加上產能擴充需時間,除非AI系統對token處理達到飽和點,否則HBM供給壓力不會緩解。

記憶體牆問題對一般消費者有什麼影響?

主要影響在於AI服務成本與終端產品價格。HBM與DDR5價格居高不下,會推升AI伺服器建置成本,間接反映在雲端AI服務訂閱費或AI PC的終端售價上,消費者短期內很難享受到降價的AI硬體。

半導體業界有什麼可能解決方案?

目前方向包括發展更先進的封裝技術、探索新型記憶體架構、以及從系統層面優化資料傳輸效率。但美光觀點暗示,短期內最有效的解法可能來自AI模型與演算法的頻寬節省設計,而非單純依賴硬體。

※ 此篇文章由 AI 改寫或生成,內容僅供參考,可能存在錯誤或不準確之處。