Marvell AI 記憶體是這篇文章討論的核心

⚡ 快速精華:60 秒抓住重點
💡 核心結論:Marvell 在 FMS 2026 正式把 AI 記憶體基礎設施從「伺服器內部」拉高到「機櫃群規模」,記憶體開始能跟算力脫鉤、獨立擴充——這是 Agentic AI 推理時代最重要的硬體風向球之一。
📊 關鍵數據:Gartner 估 2026 年 Agentic AI 支出將達 2019 億美元;全球 AI 推理市場 2026 年約 1178 億美元、2034 年上看 3126 億美元;Marvell 單一 CXL Switch 記憶體池化已衝上 48TB 量級。
🛠️ 行動指南:先盤點自家工作負載是否屬於長上下文/多代理型推理,再評估 KV Cache 優化與 CXL 記憶體池化的導入時機,別急著無腦堆 GPU。
⚠️ 風險預警:DRAM/HBM 正處歷史級價格上漲週期,CXL 生態尚未完全標準化,記憶體擴張若沒算好 ROI,很可能變成吃錢怪獸。
上週矽谷的記憶體圈突然熱得發燙。FMS 2026 會場上,Marvell 一口氣端出橫跨三個層級的 AI 記憶體組合,從伺服器內的 SSD 控制器、機架級的 CXL 記憶體池化,一路延伸到機櫃群規模的光學共享記憶體。我反覆咀嚼那幾份新聞稿,越看越覺得這不是單純的產品發布——這是硬體架構層級的一次地殼運動。
過去兩年,鎂光燈幾乎全打在 GPU 算力上,記憶體被當成可有可無的背景板。但 Agentic AI(代理式 AI)這股浪打上來之後,風向徹底變了:自主代理會拆解任務、反覆推理、呼叫工具、把上下文視窗越拉越長,記憶體不再只是「裝資料的倉庫」,而是直接決定推理速度快慢與成本高低的命脈。這篇長文,我想帶著你從觀察者的視角,把 Marvell 這步棋拆開來看。
為什麼 Agentic AI 一跑起來,記憶體頻寬就卡成最大瓶頸?
先講個殘酷的事實:算力這幾年翻了好幾番,但記憶體頻寬的成長速度根本追不上。傳統的 chatbot 問一句答一句,記憶體壓力還算溫和;Agentic AI 完全是另一個物種——它會自己規劃步驟、中途叫外部工具、反覆驗證結果,每一步都要把「已經想過的東西」暫存下來,這些暫存資料就是業界口中的 KV Cache(鍵值快取)。
模型越大、上下文視窗越長、代理越會「鑽牛角尖」地多輪推理,KV Cache 就膨脹得越恐怖。Marvell 官方說得很直白:記憶體容量、頻寬與連通性正在變得跟算力一樣關鍵,而傳統「記憶體綁死在單一伺服器」的架構已經撐不住了。TrendForce 也發出警訊,Agentic AI 正驅動記憶體需求出現結構性擴張,短期內供需缺口根本補不回來,價格只會繼續往上走。
白話翻譯:GPU 再強,餵不到資料也是白搭。當你的代理在「思考」時,卡住的往往不是運算單元,而是記憶體這個水龍頭——這就是所謂的 記憶體牆(Memory Wall)。
Marvell 這次端出什麼牛肉?Bravera、Structera 與光學共享記憶體一次看懂
這次發布的狠角色有三個,分別卡位三個不同戰場:
- 🚀 Bravera SC6(伺服器層):新一代 PCIe 6.0 SSD 控制器,效能是前代 SC5 的兩倍,預計 2026 年 Q4 開始送樣。它的任務是讓「接近算力」的 AI 儲存不再拖後腿,餵資料的速度直接翻倍。
- 🧠 Structera CXL 平台(機架層):透過 CXL 協定做機架級的記憶體擴充與池化,讓多台伺服器共享同一池記憶體。Futurum Group 的現場分析指出,Marvell 已經把單一 CXL Switch 背後的記憶體容量推到 48TB——這數字在一年前還是難以想像的。
- 💡 Photonic Fabric(機櫃群層):光學共享記憶體,用光互連把整個 pod 的記憶體資源串成一個大水池,延遲低到可以當「本地記憶體」用。這是把「記憶體網路化」的野心直接寫在臉上的產品。
這套組合的邏輯一句話總結:讓記憶體可以脫離單一伺服器、獨立於算力擴充。過去記憶體是算力的附庸,買 GPU 就得順便綁記憶體;現在 hyperscaler 可以各自擴充、動態調配,基礎設施利用率與 token 效率自然跟著上去。

CXL 記憶體池化 48TB 是什麼概念?對 2026 年 AI 推理市場意味著什麼?
先感受一下 48TB 的份量:一顆主流 GPU 的 HBM 記憶體大概 80~192GB,48TB 差不多等於一整個機櫃群能共享的「巨型記憶體水庫」。對跑長上下文 agent 工作流的人來說,這代表你的代理可以同時掛著幾百條對話、幾萬 token 的上下文,不用三不五時把中間結果倒回磁碟——倒一次磁碟,推理速度就直接崩盤。
放到市場維度看,這步棋踩得非常準。Fortune Business Insights 估計,全球 AI 推理市場 2026 年約 1178 億美元,2034 年上看 3126 億美元;而 Gartner 預估 Agentic AI 支出 2026 年就會衝到 2019 億美元。推理與代理的成長曲線有多陡,記憶體需求的斜率就有多陡。當算力軍備競賽打到一個階段,下一場戰爭的地點不在 GPU,而在餵養 GPU 的記憶體管道。
更關鍵的是,這波升級把「記憶體與算力解耦」從概念推進了實際部署。CXL 過去一直被質疑是「雷聲大雨點小」,但 Futurum 在 FMS 現場直接下結論:這波發布意味著 CXL 正從 hyperscaler 的評估階段,正式邁入實際部署階段。風向已經變了。
企業與開發者該怎麼搭上這波記憶體基礎設施升級?
講完產業面,拉回實際操作。我的建議很樸素:別急著換設備,先盤點自己的 workload。
- 第一步:量測 KV Cache 佔比。用 profiling 工具看看你的推理服務裡,記憶體到底被權重、啟動資料還是 KV Cache 吃掉。如果 KV Cache 是老大,恭喜你,你就是記憶體基礎設施升級的目標客戶。
- 第二步:先做軟體優化,再談硬體。KV Cache 量化、稀疏化、跨請求共享 KV Cache,這些軟體手段常常能用三成功本換七成效果,硬體投資可以再緩一緩。
- 第三步:盯緊 CXL 生態成熟度。2026 是 CXL 從試點走向部署的轉折年,跟著 hyperscaler 的採用節奏走,別當白老鼠,也別當最後一個。
- 第四步:把「記憶體成本」寫進 TCO 模型。算力好算,記憶體的隱性成本(頻寬瓶頸、容量溢價、閒置浪費)才是真正吃掉利潤的地方。
對開發者來說,短期最務實的動作是:把你的 agent 框架的 context 管理做精——該壓縮的壓縮、該分層的分層。硬體大革命是颱風,但你得先確定自己的船沒有漏水。
風險預警:記憶體擴張背後藏著哪些坑?
硬體再性感,也不能閉眼梭哈。這波記憶體大革命至少有四個坑要留心:
- ⚠️ DRAM/HBM 價格暴漲週期:業界報告已點出 2026~2030 會迎來歷史級的 DRAM/HBM 漲價潮,記憶體擴張的資本支出很可能被供應鏈漲價吃掉大半,成本控管比以往更關鍵。
- ⚠️ CXL 生態尚未完全標準化:不同廠商的 CXL 設備互通性還在磨合,記憶體池化的管理軟體也不夠成熟,導入初期可能踩到相容性地雷。
- ⚠️ 光學共享記憶體的工程複雜度:光互連的良率、散熱、封裝都是硬骨頭,Photonic Fabric 這種「把記憶體網路化」的路線,規模化落地還需要時間驗證。
- ⚠️ 過度擴張的資本陷阱:記憶體可以獨立擴充是好事,但獨立擴充也意味著更容易過度投資。沒算好實際需求就大舉佈建,48TB 的水庫也可能養蚊子。

常見問題 FAQ
Q1:什麼是 Agentic AI?為什麼它特別吃記憶體?
Agentic AI(代理式 AI)是指能自主拆解任務、規劃步驟、呼叫外部工具並反覆驗證結果的 AI 系統,而不是只會「問一句答一句」的聊天機器人。它之所以特別吃記憶體,是因為每多一輪推理、每拉長一段上下文,系統就得把更多中間結果暫存在 KV Cache 裡;代理越「會想」,記憶體就被吃得越兇。因此記憶體容量、頻寬與連通性,成了跟算力同等關鍵的資源。
Q2:Marvell 的 CXL 記憶體池化技術,跟傳統伺服器記憶體有什麼不同?
傳統架構下,記憶體綁死在單一伺服器,買多少算力就配多少記憶體,很容易互相浪費。Marvell 的 Structera CXL 平台透過 CXL 協定把多台伺服器的記憶體「匯流成池」,並已做到單一 CXL Switch 背後 48TB 的容量,讓記憶體能獨立於算力擴充、動態調配。白話講,就是把「各自帶便當」改成「大家一起吃自助餐」,利用率與 token 效率都更高。
Q3:一般企業現在該不該導入這些新記憶體架構?
建議分階段:先量測自己的 KV Cache 佔比與記憶體成本,若長上下文/多代理工作負載確實吃重,可先做軟體層的 KV Cache 優化,再評估 CXL 記憶體池化。2026 年正值 CXL 從試點轉向部署的轉折期,跟著 hyperscaler 節奏、鎖定 ROI 明確的場景導入最穩妥,不必急著全面翻新。
你的 AI 推理,準備好迎接記憶體大革命了嗎?
無論你是正在部署 Agentic AI 的技術決策者,還是想搞清楚自家記憶體成本為什麼失控的開發者,我們的團隊都能幫你把這盤帳算清楚。從 KV Cache 優化到 CXL 池化評估,一條龍幫你落地。
📚 參考資料與權威文獻
- Marvell 官方新聞稿:Marvell Advances AI Memory Infrastructure Portfolio to Accelerate Agentic AI Inference
- Marvell 投資人關係新聞稿:Marvell Advances AI Memory Infrastructure Portfolio(Investor Relations)
- Futurum Group 分析:Marvell Scales AI Memory to 48TB Behind a Single CXL Switch at FMS 2026
- TrendForce:Agentic AI Drives Structural Expansion in Memory Demand
- Fortune Business Insights:Agentic AI Market Size, Share & Forecast Report
- Wikipedia:Marvell Technology, Inc.
* 本文引用之市場數據來自公開研究機構,實際數字可能因統計口徑不同而有差異。投資決策請自行評估風險。
Share this content:













