高效能AI需求激增:NVIDIA Blackwell平台推動液冷散熱方案,預估年底滲透率達10%

隨著人工智慧(AI)技術的迅速發展,高效能計算需求與日俱增。NVIDIA 將於2024年底推出全新一代平台 Blackwell,這一舉措預計將推動大型雲端服務提供商(CSP)建設新的 AI 伺服器資料中心。TrendForce 的最新報告指出,這將有望使液冷散熱方案的滲透率在年底前達到10%。Blackwell 平台預計於2025年正式放量,取代現有的 Hopper 平台,成為 NVIDIA 高階 GPU 的主力方案,預計占整體高階產品的83%。

液冷技術:應對AI高耗能需求的最佳選擇

液冷技術:應對AI高耗能需求的最佳選擇

Blackwell 平台的高效能 AI 伺服器,如 B200 和 GB200,單顆 GPU 功耗可達1,000W,HGX 機種每台裝載8顆 GPU,NVL 機種每櫃最多可達72顆 GPU。如此巨大的能耗推動了液冷散熱供應鏈的成長。傳統氣冷散熱方案已經無法應對這些需求,尤其是 GB200 NVL36 和 NVL72 整機櫃的熱設計功耗(TDP)分別高達70kW和140kW,需要更高效的液冷方案來有效解決散熱問題。

液冷技術,尤其是直接液體冷卻(DLC),提供了比傳統氣冷方案更高的散熱效率。液冷方案包括水冷板(Cold Plate)、冷卻分配系統(Coolant Distribution Unit, CDU)、分歧管(Manifold)、快接頭(Quick Disconnect, QD)和風扇背門(Rear Door Heat Exchanger, RDHx)。其中,CDU 是液冷系統的關鍵組件,負責調節冷卻劑流量,確保機櫃溫度控制在預設的 TDP 範圍內。

市場趨勢與供應鏈發展

市場趨勢與供應鏈發展

TrendForce 報告顯示,NVIDIA AI 方案目前主要依賴 Vertiv 作為 CDU 供應商,而奇鋐、雙鴻、台達電和 CoolIT 等公司則正在測試並驗證液冷系統的其他關鍵零組件。隨著 NVIDIA 積極擴展 CSP 客群,預計2025年 GB200 折算 NVL36 的出貨量將達6萬櫃,而 GB200 的 Blackwell GPU 用量則可達210萬至220萬顆。

未來,NVIDIA 計劃推出多種 AI 伺服器組態,包括 HGX、GB200 Rack 和 MGX,分別針對 CSP 和企業型客戶。預計這三個機種的出貨比例將約為5:4:1。HGX 平台能夠無縫接軌既有的 Hopper 平台設計,使 CSP 或大型企業客戶能夠迅速採用。GB200 整櫃 AI 伺服器方案則主要針對超大型 CSP 市場。TrendForce 預計 NVIDIA 將於2024年底率先導入 NVL36 組態,以求快速進入市場。NVL72 由於其更複雜的設計和散熱系統,預計將於2025年推出。

液冷方案的挑戰與前景

儘管液冷方案能夠有效應對高效能 AI 伺服器的散熱需求,但其設計和實施仍面臨諸多挑戰。液冷機櫃設計更適合新建資料中心,但涉及土地和建築規劃等複雜程序。此外,CSP 可能不希望受制於單一供應商的規格,可能選擇其他搭載 x86 CPU 架構的機種,或擴大自研 ASIC AI 伺服器基礎設施,以降低成本或針對特定 AI 應用情境。

在此背景下,從直接液體冷卻(DLC)到浸沒式冷卻,乃至經過改良的氣冷配置,滿足不同客戶的需求。這些先進的冷卻技術不僅能夠提升 AI 伺服器的算力,還能降低使用者的碳足跡和營運成本(OpEx),實現更強大且可持續的 AI 運算。

資料來自:TechNews

延伸閱讀

w250422_pre

2025 台灣資安大會圓滿落幕|鑫捷科技與您攜手守護數位資安未來

WebPlus 鑫捷科技作為資安領域的專業 IT 解決方案提供商,榮幸參與此次盛會,並於攤位 C101 展示多元的資安防護技術與服務。感謝所有蒞臨現場的貴賓與合作夥伴的熱情支持!WebPlus 將持續致力於提供高效、安全且可靠的 IT 解決方案,與您一同守護企業數位資產。
2025 cybersec_pre

2025 CYBERSEC資安大會 | 鑫捷科技在攤位 C101 等你來!

鑫捷科技將參與 2025 臺灣資安大會,現場展示企業級資安解決方案,助您全面強化防護力!歡迎蒞臨攤位 C101,與我們一同掌握最新資安趨勢,還有精美小禮等您帶回家!
AI 驅動的網路攻擊崛起:LLM 如何重塑威脅格局

AI 驅動的網路攻擊崛起:LLM 如何重塑威脅格局

隨著AI技術的快速發展,網路攻擊變得更加高效與危險。本文探討了LLM技術如何重塑網路威脅,並介紹 Deep Instinct 如何利用深度學習技術預測並防禦 AI 生成的惡意攻擊。
UAT-5918 新興駭客組織針對臺灣關鍵基礎設施的攻擊

UAT-5918 新興駭客組織針對臺灣關鍵基礎設施的攻擊

思科Talos揭露駭客組織UAT-5918,自2023年起針對台灣關鍵基礎設施發動攻擊,利用已知漏洞與開源工具竊取機敏資訊。近期台灣政府部門每日遭受240萬次攻擊,企業及政府應強化資安防護,確保關鍵基礎設施安全。

成功案例

cs250327_pre

佐登妮絲|HPE 伺服器建置

我們根據客戶系統規模與應用需求,進行伺服器組態優化與虛擬化資源配置,協助企業實現營運彈性與 IT 效率同步提升,為未來數位化轉型奠定基礎。
cs250318_pre

英諾美生物科技|資料解密與防護強化

我們協助客戶分析受加密資料,建立安全且符合法規的解密流程,並導入進階權限控管與資料存取審核機制,強化整體資訊安全防線。本專案除提升資料可用性,也確保企業知識資產不因資安風險而暴露,實現資訊安全與營運效率的雙重保障。
cs250303_pre

永勝光學|Unity XT 儲存與 記憶體擴充

評估現有架構後,規劃擴充容量與記憶體升級方案,並於不中斷營運下順利完成導入。擴充後,客戶在資料存取速度與系統反應效能上均獲得顯著改善,進一步提升產品設計與製造效率,展現 IT 資源投資的高回報價值。
cs2502052_pre

協鴻工業|PLM 主機-Dell 高效伺服器導入

我們依據客戶應用需求,進行系統規劃與資源配置,確保 PLM 系統穩定、快速運作,為企業提供強大運算能力與未來升級空間,協助客戶在競爭激烈的製造產業中維持技術領先。

讓鑫捷科技幫助您推動企業數位轉型,提升企業效率與競爭力。
立即聯繫,獲得量身打造的資訊解決方案!