AI晶片戰局升溫!輝達NVHBM記憶體技術顛覆架構,頻寬飆升30% AWS搶頭香

關鍵數字:記憶體頻寬拉升 30%、功耗砍掉 15%,還順手釋放出運算晶粒高達 25% 的寶貴面積。這不是規格表上的紙上談兵,是輝達最新端出來的 NVHBM 技術給出的硬核成績單。

AI 基礎設施的軍備競賽,已經從「誰的運算核心多」轉向「整個系統誰更流暢」。說白了,你晶片算得再快,資料餵不進去,一切都是白搭。輝達這次對記憶體架構動刀,背後打的算盤,可能比單純的效能提升還要深遠好幾層。

📊 數字會說話:NVHBM 規格總覽

傳統 HBM 架構的最大瓶頸,在於記憶體控制器得跟運算單元擠在同一個晶粒上。這不只是占空間而已,是直接掐住了效能成長的脖子。輝達這次把自家客製化的記憶體控制器從 XPU 運算晶粒抽出來,往下塞進 3D HBM 堆疊的 Base Die 裡,一次解開兩個死結:運算晶粒多了空間,記憶體跟處理器之間的路也更寬了。

數據背後藏著一個關鍵轉折:這不是輝達第一次跟記憶體供應商打交道,但這次他們決定建立一套 標準化 NVHBM 實作方式,而且是由多家記憶體供應商共同驗證出貨。這一步如果走通了,等於是把記憶體規格的制訂權,從傳統記憶體廠商手上拿走了一大塊。

架構翻轉:從「運算為王」到「系統為王」

為什麼要把控制器從運算晶粒上移走?輝達給的理由很實際:傳統設計不只吃掉晶片面積,還壓縮了擺放更多運算單元的可能性。換句話說,過去晶片設計師得在「多塞幾個核心」跟「放控制器」之間做取捨,NVHBM 直接把這個選擇題變成送分題。

騰出來的那 25% 面積要拿來幹嘛?輝達沒明說,但用膝蓋想也知道——塞更多運算單元,或是塞更專門的 AI 加速電路。這對那些正在設計下一代兆級參數模型的 AI 實驗室來說,應該是比過年收到紅包還令人開心的消息。

不過,技術規格再漂亮,沒有生態系支持也是孤芳自賞。這就帶出另一個值得盯緊的關鍵角色:亞馬遜旗下 Annapurna Labs

AWS 搶頭香:Trainium 晶片的大戰略

Annapurna Labs 不只是 NVHBM 的第一個合作夥伴,雙方在 NVLink Fusion 平台上還有更深的布局。根據目前公開的規畫,Annapurna 下一代 Trainium 晶片將從 Trainium4 開始支援 NVLink Fusion,代表亞馬遜自行研發的 AI 晶片能跟輝達 GPU 透過共同的機架級架構整合在一起。

這步棋有意思的地方在於:亞馬遜自己也在做 AI 晶片,理論上是輝達的競爭對手,但他們反而選在記憶體跟互連架構上跟輝達深度綁定。這背後代表的意義,或許是 AWS 看清楚了一個現實——與其從零打造整個機架級生態系,不如在關鍵節點上跟霸主合作,把資源集中在更高階的晶片設計差異化上

編輯觀點:從產業面來看,輝達這次出手的目標其實很明確——在摩爾定律放緩的時代,繼續用「系統級創新」拉開跟追趕者的距離。把記憶體控制器從運算晶粒移走,聽起來只是個設計變更,但背後是對整個供應鏈話語權的重新布局。更深的意涵在於:當 NVHBM 變成產業標準、當 NVLink Fusion 成為機架級架構的共同語言,那些打算用客製化晶片跟輝達競爭的廠商,會發現自己繞不開輝達定義的遊戲規則。這不是產品競爭,這是標準之爭。對於正在評估 AI 基礎設施的企業來說,現在下注的已經不只是單顆晶片的效能,而是整個生態系的長期演化方向。

趨勢預測:記憶體軍備競賽的下一回合

輝達 NVHBM 的出現,其實提前掀開了下一代 AI 記憶體規格大戰的序幕。對標的對象很明確:就是已經在 HBM 市場站穩腳跟的 SK 海力士跟三星。輝達不自己生產記憶體,但他們透過定義規格跟驗證標準,直接在供應鏈裡卡了一個「規格制訂者」的位置。

過去記憶體廠商決定 HBM 的頻寬、功耗、堆疊層數,現在輝達跳下來說「我來訂規格,你們照著做」。這招學的是誰?蘋果之於台積電、特斯拉之於電池供應商——終端王者用龐大的採購量跟技術定義權,反過來重塑上游供應鏈的遊戲規則。

值得追蹤的還有另外兩個動向:第一,其他 AI 晶片業者,包括 AMD、英特爾,甚至那些一線的 CSP,會不會跟進類似的架構設計?第二,記憶體廠商面對輝達的「標準化要求」,內心的真實 OS 是樂觀其成還是暗罵在心裡?這兩個問題的答案,大概未來一年內就會越來越清楚。

數據告訴我們什麼?

把這幾組數據放在一起看,其實拼湊出的畫面蠻清楚的:AI 晶片競爭已經進入「系統級對決」的階段。頻寬 30% 的提升、功耗 15% 的縮減、晶粒面積 25% 的釋放,三組數字各自獨立看都不算太驚人,但疊加在一起,再加上標準化策略跟生態系綁定,那個綜效就不是線性加法,而是指數級的競爭優勢。

對企業決策者來說,這裡其實有個簡單的判斷原則:如果你的 AI 基礎建設還在用「買哪顆晶片」的邏輯思考,可能需要重新校準了。 真正的分水嶺在於:誰能最快把運算、記憶體、網路、軟體這四根支柱整合成一套流暢的系統。NVHBM 只是這個趨勢下的一塊拼圖,但這塊拼圖透露出來的訊號,比它本身的規格數字更有參考價值。

晶片設計永遠在「效能、功耗、面積」的三角習題裡找答案,輝達這次給出的解題思路,至少證明了一件事:有時候問題的答案不在問題本身,而在於你願不願意重新問問題——誰規定記憶體控制器一定得待在運算晶粒上?

本文改寫整理自公開新聞來源,原始報導由科技新報發布。

常見問題 FAQ

NVHBM 跟標準 HBM4E 的主要差異是什麼?

NVHBM 將輝達客製化記憶體控制器從 XPU 運算晶粒移至 3D HBM 堆疊中的 Base Die,頻寬提升 30%、功耗降低 15%,並釋放最高 25% 運算晶粒面積。

為什麼 AWS 要跟輝達合作 NVHBM?

亞馬遜旗下 Annapurna Labs 希望透過 NVLink Fusion 平台將自研 Trainium 晶片與輝達 GPU 整合於共同機架級架構,提升 AI 工作負載的效能與效率。

NVHBM 技術何時會實際導入產品?

輝達已宣布 Annapurna Labs 為首家合作業者,其下一代 Trainium4 晶片將支援 NVLink Fusion,具體量產時程尚待後續公布。

NVHBM 會影響記憶體供應商生態嗎?

輝達計畫建立標準化 NVHBM 實作方式並由多家記憶體供應商驗證,可能改變記憶體供應鏈中規格制訂與產品驗證的權力結構。

※ 此篇文章由 AI 改寫或生成,內容僅供參考,可能存在錯誤或不準確之處。