TechNews Logo

AI 推理帶動 CPU 需求,如何影響記憶體規格?

Answer | Powered by TechNews Smart AI

隨著 AI 應用從雲端訓練轉向邊緣推論,運算架構正迎來結構性變革。代理式 AI(Agentic AI)的興起使 CPU 在任務編排與決策判斷中的角色加重,帶動 CPU 與 GPU 配置比例趨向平衡。這股趨勢直接衝擊記憶體規格,推論階段對 IOPS 的極高要求,促使 HBM、DDR5 及企業級 SSD 出現同步緊缺。NVIDIA 預計推出的 Rubin CPX 選擇搭載 GDDR7 而非 HBM,顯示產業界正透過異質整合與分層架構,試圖在頻寬、容量與總體擁有成本(TCO)之間取得新平衡,以應對推論任務中龐大的資料吞吐需求。

這場由推論驅動的硬體轉型,核心動機在於突破「記憶體牆」並優化營運成本。過去單純追求算力峰值的邏輯已不適用,現在廠商更看重每瓦效能與每美元效能。記憶體產業正形成由 HBM 作為高速快取、HBF 或 CXL 延伸記憶體池作為大容量儲存、以及 QLC eSSD 作為資料湖的三層級體系。對記憶體大廠而言,這不僅是產品世代交替,更是產能分配的戰略重組。隨著 AI PC 與手機對記憶體容量倍增的需求,加上伺服器端的結構性短缺,預計 2026 年前記憶體價格將維持高檔,並迫使下游系統商重新定義硬體規格以維持利潤。

back_icon 解鎖更多問題

參考資料