GPU 之後為什麼看 HBM 和儲存?AI 基礎設施投資鏈條拆解

AI 基礎設施中的資料中心算力與儲存鏈條

AI 基礎設施的投資主線正在從「誰有 GPU」擴展到「誰能讓 GPU 高效運行」。你不能只看算力峰值,還要看 HBM 頻寬、顯存容量、企業級 SSD、Nearline HDD、網路、電力和資料中心儲存架構。對普通投資者來說,GPU 是入口,HBM 和儲存是判斷 AI 需求是否繼續外溢的重要線索。

核心要點

  • GPU 決定算力上限,HBM 決定模型吞吐和資料搬運效率。
  • AI 訓練看集群吞吐,AI 推理更依賴記憶體、延遲和併發。
  • HBM、DRAM、SSD、HDD 對應不同資料溫度和成本位置。
  • 儲存需求來自資料集、向量庫、日誌、模型權重和推理結果。
  • 投資判斷要看訂單、價格、毛利率、庫存和客戶集中度。
  • AI 儲存鏈條有成長彈性,也有週期反轉和估值壓縮風險。

GPU 之後為什麼輪到 HBM 和儲存?

GPU HBM 與半導體硬體之間的資料傳輸關係

GPU 之後要看 HBM 和儲存,是因為 AI 系統的瓶頸正在從「有沒有 GPU」轉向「GPU 能不能持續獲得足夠快、足夠近、足夠大的資料供給」。GPU 負責計算,但模型權重、訓練資料、KV cache、向量檢索和推理日誌都需要不同層級的記憶體和儲存支撐。

你可以把 AI 資料中心理解成一座「AI 工廠」。GPU 是核心生產線,HBM 是貼著生產線的高速料倉,DRAM 是伺服器內的緩衝區,SSD 是熱資料倉庫,HDD 和物件儲存是大容量資料湖。如果料倉太小、傳送帶太慢,GPU 即使再貴,也會出現等待資料的問題。

NVIDIA 的產品升級也說明了這一點。NVIDIA H200 的 141GB HBM3e 與 4.8TB/s 頻寬說明,高端 AI GPU 的競爭不只在 Tensor Core,也在更大顯示記憶體和更高頻寬。DGX B200 的 1,440GB GPU memory 與 64TB/s HBM3e bandwidth進一步把這種趨勢推到系統級:一台 AI 伺服器已經是 GPU、HBM、NVLink、CPU、DRAM、NVMe SSD 和網路設備的組合。

環節 主要解決的問題 對 AI 的影響 代表資產
GPU 矩陣計算 決定訓練和推理速度上限 AI 加速器
HBM 高速近端記憶體 影響模型吞吐、上下文和並發 HBM3E、HBM4
DRAM 系統記憶體 支撐 CPU、快取和資料前處理 DDR5、RDIMM
SSD 熱資料存取 支撐向量庫、RAG、快取和高 IOPS 企業級 SSD
HDD 大容量保存 支撐資料湖、備份、訓練資料和日誌 Nearline HDD

對投資者來說,這意味著 AI 基礎設施不再是單一 GPU 故事。你需要沿著資料流看:資料從哪裡來,如何被讀取,如何被快取,如何進入 GPU,推理完成後又如何保存。只看 GPU 訂單,容易忽略 HBM 供給、企業級 SSD 價格、Nearline HDD 出貨和資料中心資本開支的變化。

Blackwell 架構的 2080 億電晶體與 10TB/s chip-to-chip interconnect也說明,AI 晶片正在進入系統工程階段。晶片內部互連、封裝、HBM、伺服器記憶體和機架級網路共同決定可用算力,而不是某一個零件單獨決定結果。

小結:GPU 是 AI 基礎設施投資的入口,但不是終點。你真正要觀察的是「算力能否被持續餵滿」。HBM 解決 GPU 近端頻寬和容量問題,DRAM 與 SSD 解決伺服器內部快取和熱資料存取,HDD 與物件儲存解決海量資料沉澱。GPU 之後看 HBM 和儲存,本質上是在看 AI 從晶片採購走向系統部署、從訓練走向推理、從一次性建設走向長期資料營運。

HBM 為什麼成為 AI GPU 的關鍵瓶頸?

HBM 高頻寬記憶體與晶片互連的硬體基礎

HBM 成為關鍵瓶頸,是因為大模型不只需要的運算,也需要高速搬運資料。模型參數、激活值和 KV cache 都要頻繁進出 GPU 近端記憶體。普通 DRAM 離 GPU 更遠,頻寬和延遲難以滿足頂級 AI 加速器需求;HBM 透過堆疊和先進封裝,把高頻寬記憶體放在 GPU 附近。

HBM 解決的是頻寬和近端容量問題

HBM 不是普通「記憶體條」的升級版,而是一種圍繞 GPU 和 AI 加速器設計的高頻寬記憶體。它透過多層 DRAM die 堆疊、TSV、interposer 和先進封裝,把更寬的資料通道放在離運算單元更近的位置。這樣做的目的不是單純增加容量,而是減少資料搬運時間,讓 GPU 在訓練和推理中少等待。

Micron HBM3E 的 24GB 8-high cube 與超過 1.2TB/s bandwidth體現了 HBM 的核心價值:每個 HBM 堆疊提供極高頻寬,多個堆疊再圍繞 GPU 形成高吞吐記憶體系統。到 Blackwell Ultra,NVIDIA 技術部落格提到每顆 GPU 288GB HBM3e 與 8TB/s bandwidth,其重點正是讓更大模型、更長上下文和更高併發推理運行在 GPU 近端記憶體中。

為什麼 HBM 更貼近 GPU 價值鏈?

HBM 離 GPU 最近,價格也更容易受到 AI 加速器需求拉動。它不是獨立賣給普通消費電子的標準件,而是和 AI GPU、先進封裝、晶圓代工、基板、測試和雲廠商採購計畫強綁定。換句話說,HBM 的需求變化更能反映高端 AI 伺服器的真實建設節奏。

Micron 在 2025 財年第三季度提到,HBM revenue nearly 50% sequential growth 與 data center revenue more than doubled year-over-year,這說明 AI 正在把部分存儲週期品推向更高價值的伺服器和資料中心場景。SK hynix 也表示,12-layer HBM4 samples已交付主要客戶,並計劃在認證後推進量產準備,這反映 HBM 競爭已經從 HBM3E 進入 HBM4 階段。

HBM 需求上升通常來自五個方向:

  1. 大模型參數規模擴大,需要更高近端容量。
  2. 上下文窗口變長,KV cache 佔用快速上升。
  3. 推理並發增加,顯存成為服務能力約束。
  4. MoE、RAG、Agentic AI 增加資料存取壓力。
  5. GPU 算力提升後,記憶體頻寬必須同步提高。

小結:GPU 之後先看 HBM,是因為 HBM 直接決定高端 AI GPU 能否釋放性能。算力峰值越高,數據搬運壓力越大;模型越大、上下文越長、推理併發越高,HBM 的容量和帶寬越關鍵。但 HBM 不是沒有風險的單向成長資產。你還需要看客戶集中度、先進封裝產能、良率、合約價格、技術迭代和擴產節奏。HBM 的彈性來自 AI GPU,風險也來自 AI GPU 採購週期和供給擴張。

AI 訓練和 AI 推理分別需要什麼存儲?

企業級 SSD 與 AI 推理熱數據訪問需求

AI 訓練更需要高吞吐和大容量,AI 推理更需要低延遲、併發和熱數據訪問。訓練階段要不斷讀取海量數據集、保存 checkpoint 和中間結果;推理階段則要處理用戶請求、上下文、KV cache、embedding、向量數據庫和 RAG 文檔檢索。

AI 訓練看吞吐、容量和穩定供給

訓練不是把數據一次性放進 GPU 就結束。預訓練需要海量語料、多模態數據和分佈式文件系統;微調需要行業數據集和反覆實驗;大模型訓練過程中還要保存 checkpoint,以便故障恢復和版本回滾。這裡最關鍵的指標不是單個硬盤快不快,而是整個存儲系統能否持續給 GPU 集群供數。

訓練階段常見的存儲需求包括:

資料類型 主要用途 更關注的指標 相關儲存
原始資料集 預訓練和清洗 容量、成本、可靠性 HDD、物件儲存
清洗後資料 訓練輸入 吞吐、可擴展性 SSD、分散式檔案系統
Checkpoint 故障恢復 寫入速度、穩定性 SSD、物件儲存
日誌和指標 訓練監控 持久保存、可追蹤 HDD、物件儲存
中間結果 實驗管理 讀寫效能、版本管理 SSD、DRAM

AI 推理看低延遲、並發和熱資料

推理進入商業化階段後,儲存壓力會從「訓練前準備資料」轉向「執行中不斷讀寫資料」。RAG 要檢索企業文件,Agent 要讀寫工具結果,長上下文模型會產生大量 KV cache,使用者請求和輸出也會沉澱成日誌。WEKA 對 AI memory wall 的解釋抓住了關鍵:當推理所需記憶體超過 GPU 可用實體記憶體時,延遲和並發都會受影響。

推理場景下,HBM、DRAM、SSD 和物件儲存會形成分層:HBM 保存最緊急的模型執行資料,DRAM 做系統快取,NVMe SSD 支撐向量庫和熱資料,HDD 與物件儲存保存長期資料。你看到的「AI 應用越多」,背後往往是 token、embedding、使用者日誌、模型版本和審計記錄一起增長。

小結:訓練和推論對儲存的要求不一樣。訓練更像大型工程,需要持續、高吞吐、可恢復的資料供給;推論更像線上服務,需要低延遲、高併發和熱資料存取。AI 從實驗室走向企業生產環境後,儲存需求不會停留在訓練資料集,而會擴展到向量資料庫、RAG 文件庫、使用者互動日誌、模型版本、稽核記錄和長期資料湖。投資判斷也應區分訓練驅動和推論驅動,而不是把所有「AI 儲存」混在一起。

從 HBM 到 HDD:AI 儲存鏈條如何分層?

AI 儲存鏈條可以按「離 GPU 的距離」分層:越靠近 GPU,越看速度、頻寬和延遲;越遠離 GPU,越看容量、成本和可靠性。HBM 是最貼近 GPU 的高價值環節,DRAM 和 SSD 支撐伺服器內部熱資料,Nearline HDD 和物件儲存支撐資料中心容量池。

第一層是 GPU 近端的 HBM。它負責模型權重、激活值、KV cache 和高頻資料存取,直接影響 token throughput、context length 和 concurrent inference。第二層是伺服器內部的 DRAM 與企業級 SSD,它們負責系統快取、資料前處理、向量檢索和高 IOPS。第三層是資料中心容量池,Nearline HDD、物件儲存和備份系統保存訓練資料、日誌、歸檔和長期資料。

分層 距離 GPU 速度要求 單位容量成本 典型用途
HBM 最近 最高 最高 模型執行、KV cache
DRAM 較近 高 高 系統快取、前處理
企業級 SSD 中等 較高 中高 向量庫、熱資料、RAG
Nearline HDD 較遠 較低 低 資料湖、備份、訓練資料
物件儲存 最遠 彈性 低 歸檔、日誌、長期留存

這種分層也能解釋為什麼 HDD 沒有被 SSD 完全替代。AI 資料中心需要大量熱資料,但更需要海量溫資料和冷資料。訓練語料、影片、圖片、模型版本、日誌和備份都不可能全部放在 HBM 或企業級 SSD 裡。Seagate 在 2026 財年第三季度披露,收入 31.12 億美元與 GAAP 毛利率 46.5%,高容量硬碟需求正在反映到財務表現中。Western Digital 也在 2026 財年第三季度披露,收入 33.37 億美元與 GAAP gross margin 50.2%,顯示雲端和資料中心儲存週期有明顯改善。

這裡的判斷重點不是「SSD 會不會取代 HDD」,而是「哪些資料適合放在哪裡」。AI 資料越多,熱資料、溫資料和冷資料都會增加。SSD 更適合頻繁讀寫、低延遲存取向量檢索;HDD 更適合低成本保存海量容量。兩者更多是分層共存,而不是單純替代。

小結:AI 儲存鏈條的核心規律很簡單:離 GPU 越近,速度越重要;離 GPU 越遠,容量和成本越重要。HBM 的投資彈性來自 AI GPU 性能釋放,企業級 SSD 的彈性來自推理、RAG 和熱數據訪問,Nearline HDD 的彈性來自數據湖、備份、日誌和雲廠商容量擴張。你在分析不同公司時,不能只問「是不是 AI 儲存股」,還要問它處在儲存層級的哪一層、收入受價格影響多大、客戶是誰、供給能否持續緊張。

AI 基礎設施投資鏈條應該看哪些指標?

判斷 AI 基礎設施鏈條,不能只看新聞裡的「AI 需求強勁」。更實用的方式是看三組指標:需求端看雲廠商資本開支和 AI workload;供給端看 HBM、NAND、HDD 的產能和良率;財務端看收入增長、毛利率、庫存、現金流和客戶集中度。

需求端最重要的是 hyperscaler capex。雲廠商是否繼續擴建 AI 數據中心,決定 GPU、HBM、伺服器、SSD、HDD 和網絡設備的總需求。訓練型支出更集中在 GPU 集群和高吞吐儲存,推理型支出更強調成本、延遲、熱數據和在線服務效率。你不能只看某家公司說「AI 需求強」,還要看訂單是否轉化成出貨、價格和毛利率。

供給端要分開看。HBM 受 DRAM die、TSV、先進封裝、良率和客戶認證約束;NAND 受價格週期和企業級 SSD 需求影響;HDD 則要看 HAMR、areal density、nearline exabyte shipment 和長期供貨協議。Micron 2025 財年第四季度的Cloud Memory Business Unit revenue 45.43 億美元與 59% gross margin說明,AI 數據中心需求如果傳導到產品組合和價格,盈利彈性會非常明顯。

指標 對 HBM 的意義 對 SSD/HDD 的意義 投資解讀
雲廠商 CapEx 決定 GPU/HBM 採購強度 決定資料中心容量擴張 需求總閥門
HBM 合約 鎖定價格和產能 影響普通 DRAM 供給 供需緊張訊號
NAND 價格 間接影響 SSD 成本 直接影響企業 SSD 利潤 週期拐點
Nearline 出貨 間接反映資料增長 直接影響 HDD 廠商收入 容量需求訊號
毛利率 反映產品議價權 反映價格與產品結構 利潤彈性訊號
庫存 判斷供需錯配 判斷週期位置 風險提示訊號

這裡還要加一個容易被忽略的維度:交易成本。你研究 AI 基礎設施股票時,除了判斷公司基本面,也要知道實際交易成本會影響持倉和調倉體驗。美股交易成本通常不只包括佣金,還可能包括平台費、外部機構費、交易活動費等。Biya 美股交易佣金為 0 美元,平台費、外部機構費及其他費用以美股交易費用和訂單頁面展示為準;相關服務是否可用,取決於用戶所在地、身分驗證結果、平台規則及適用法律法規。

如果你需要跟蹤 AI 存儲鏈條中的美股和港股公司,可以通過Biya關注行情、交易品類和賬戶成本,也可以用美股信息查詢梳理相關標的。費用不是投資收益的決定因素,但在高波動、頻繁調倉或小額買入時,會影響真實交易體驗。

小結:AI 基礎設施投資要從「概念判斷」轉為「指標驗證」。需求端看雲廠商 CapEx、AI 服務器出貨、推理併發和企業 AI 落地;供給端看 HBM 良率、先進封裝、NAND 價格和 HDD 供給紀律;財務端看收入、毛利率、庫存、現金流和客戶結構。只有當需求真實傳導到訂單、價格和利潤,AI 存儲鏈條的投資邏輯才更紮實。

看好 AI 存儲鏈條時,必須同時看到哪些風險?

看好 AI 存儲鏈條,不代表可以忽視週期和估值。最主要的風險有三類:雲廠商資本開支放緩、存儲供給擴張導致價格回落、技術架構變化改變需求結構。AI 需求很強,但 DRAM、NAND、HDD 本質上仍帶有週期屬性。

第一類風險是 AI CapEx 放緩。如果雲廠商發現推理收入、算力利用率或電力資源不及預期,資本開支可能階段性收縮。GPU、HBM、服務器、SSD、HDD 都在同一條基礎設施預算鏈條上,需求強弱會傳導到多個環節。短期缺貨不能直接等同於長期高景氣,尤其在高估值階段,任何訂單節奏變化都可能帶來股價波動。

第二類風險是供給擴張。HBM 價格高,會刺激廠商擴產;NAND 和 HDD 漲價,也會改善行業供給意願。韓國圍繞半導體、HBM 和 AI 資料中心推出大規模投資計劃,路透社報導的韓國 AI 與晶片投資計劃一方面說明戰略重要性,另一方面也提醒你關注未來供給擴張後的週期壓力。

第三類風險是技術路徑變化。模型量化、稀疏化、MoE、CXL memory pooling、KV cache offloading、near-data processing 都可能改變 HBM、DRAM、SSD 和 HDD 的相對需求。軟體優化會提升硬體利用率,也可能降低單位推理對硬體的需求。SSD 與 HDD 之間不是簡單替代,未來更多是按資料溫度和成本分層。

投資者需要避免的誤區包括:

  1. 把所有儲存公司都當成 HBM 受益股。
  2. 只看收入增長,不看毛利率和庫存。
  3. 只看 AI 訓練,不看推理商業化節奏。
  4. 忽略客戶集中和長期合約價格。
  5. 把週期性漲價理解成永久成長股邏輯。
  6. 只看熱門公司,不看估值和現金流。

小結:AI 儲存鏈條是成長邏輯和週期邏輯的疊加,不是低風險單向賽道。HBM 更貼近 GPU 增長,但客戶集中、封裝產能和技術迭代風險更高;SSD 和 HDD 更受價格週期、庫存和供給紀律影響。更穩妥的判斷方式,是同時看景氣度、供需、估值和財務驗證。交易前也應理解平台規則、費用結構和自身風險承受能力,公開市場資訊不構成投資建議。

如果你關注 AI 基礎設施投資,不必只盯著 GPU 龍頭。更完整的觀察框架,是把 HBM、DRAM、NAND、企業級 SSD、Nearline HDD、數據中心設備、雲廠商資本開支和交易成本放在一起看。你可以先用產業鏈邏輯篩選方向,再用收入、毛利率、庫存和現金流驗證景氣度。如果所在地區符合相關服務適用條件,也可以透過註冊帳戶進一步了解 Biya 的多資產交易支援。美股、港股和數字貨幣等服務是否可用,以用戶所在地、身份驗證結果、平台規則和適用法律法規為準;任何交易決策都應基於個人目標、風險承受能力和完整費用資訊。

FAQ

AI 基礎設施投資為什麼不能只看 GPU?

AI 基礎設施投資不能只看 GPU,因為 GPU 需要 HBM、儲存、網路、電力和散熱共同支撐。GPU 決定算力上限,但 HBM 決定資料能否快速進入計算單元,SSD 和 HDD 決定訓練資料、向量庫和日誌能否高效保存與存取。

HBM 和普通 DRAM 在 AI 中有什麼區別?

HBM 更靠近 GPU,重點是高頻寬、低延遲和高密度封裝;普通 DRAM 更多承擔伺服器系統記憶體角色。AI 訓練和推理需要大量資料搬運,因此 HBM 更直接影響高端 GPU 的吞吐、上下文長度和推理併發。

AI 推理增長會帶動哪些儲存需求?

AI 推理增長會帶動 KV cache、向量資料庫、RAG 文件庫、用戶日誌和熱資料存取需求。HBM 與 DRAM 負責近端和系統快取,企業級 SSD 支撐低延遲檢索,HDD 與物件儲存承擔長期資料保存。

Nearline HDD 為什麼仍然受 AI 數據中心重視?

Nearline HDD 仍受重視,是因為它在大容量和單位成本上有優勢。AI 資料中心不僅需要高速熱資料,也需要保存訓練語料、日誌、備份、歸檔和模型版本。對冷資料和溫資料來說,HDD 仍是重要容量底座。

普通投資者如何判斷 AI 儲存股風險?

普通投資者應看需求、價格、庫存、毛利率、客戶集中度和估值。儲存行業有明顯週期屬性,短期漲價不等於長期確定性。涉及交易時,還應以平台規則、帳單明細和當地監管要求為準。

AI 儲存鏈條適合長期投資還是週期交易?

AI 儲存鏈條是否適合長期投資,取決於公司位置和個人風險承受能力。HBM 更貼近 AI GPU 增長,SSD 和 HDD 更受價格週期影響。具體交易前,應結合財務數據、估值、費用結構和合規要求綜合判斷。

*本文僅供一般資訊參考,不構成來自 BiyaPay 或其子公司及關聯公司的法律、稅務或其他專業建議,也無意取代向財務顧問或任何其他專業人士尋求建議。

對於本出版物內容的準確性、完整性或及時性,我們不作任何明示或暗示的陳述或保證。

關於的相關部落格

選擇國家或地區以閱讀本地部落格