"甲子光年:科技浪潮下的新紀元,你準備好了嗎?"

   時間:2024-09-30 16:35 來源:天脈網作者:唐云澤

在數字化浪潮席卷全球的今天,數據存儲作為數字基礎設施的基石,正面臨前所未有的挑戰與機遇。近日,華為公司副總裁、數據存儲產品線總裁周躍峰在華為全聯接大會2024上強調,中國的數字化進程雖快,但在數字基礎設施創新方面仍需加強,特別是存儲、計算和網絡的協同發展至關重要。

隨著人工智能和大模型技術的飛速發展,算力需求急劇增長,對數據存儲的性能提出了更高要求。計算如同“印刷機”,不斷生成海量數據,而存儲則是支撐這一切的“紙張”。國家互聯網信息辦公室發布的數據顯示,我國算力基礎設施綜合水平全球領先,但數據存儲能力相對滯后,存算比偏低,這成為制約數據處理效率和算力發揮的瓶頸。

各國通用計算存算比對比圖

為應對這一挑戰,華為聯合羅蘭貝格發布了《先進數據存力白皮書》,預測全球算力將持續高速增長,而中國作為算力大國,對存儲能力的需求將更加迫切。然而,現實情況是,中國存儲能力的增長速度遠不及算力,導致算力空載現象嚴重,數據存儲成為制約AI大模型訓練效率的關鍵因素。

在大模型訓練中,Checkpoint的保存與讀取速度直接影響到訓練效率。存儲寫入帶寬的不足會導致GPU算力閑置,增加訓練時間和成本。而頻繁的訓練中斷更是對存儲的可靠性和恢復速度提出了更高要求。據SNIA峰會上的數據,大模型訓練中的Checkpoint保存時間顯著影響訓練效率,高性能存儲成為解決這一問題的關鍵。

在數據存儲領域,不同介質各有千秋。內存(RAM)以其高速讀寫能力著稱,但容量有限且易失性限制了其應用范圍;而閃存(Flash),特別是NAND Flash,以其大容量、高速度和低功耗成為數據中心的首選。SSD(固態硬盤)作為NAND Flash的主要應用形式,在大數據處理和AI訓練中發揮著越來越重要的作用。

華為董事、ICT產品與解決方案總裁楊超斌在大會上發布了新一代OceanStor Dorado全閃存存儲,該產品在性能、韌性和AI支持方面實現了全面升級。通過智能DPU和FLASHLINK智能盤控卡等技術創新,新一代OceanStor Dorado實現了億級IOPS和極低時延,大幅提升了數據存儲的性能。同時,其全局互聯架構和防勒索功能也增強了系統的可靠性和安全性。

華為新一代OceanStor Dorado全閃存存儲

尤為值得一提的是,新一代OceanStor Dorado全閃存存儲集成了AI技術,實現了對話式運維和異常主動發現,運維效率顯著提升。此外,OceanStor A800作為業界首款提供長記憶能力的存儲產品,通過多級KV緩存機制,支持AI大模型的長記憶推理,減少了重復計算,提升了推理效率和成本效益。

面對AI時代的挑戰,數據存儲的創新已迫在眉睫。華為等企業的努力不僅推動了存儲技術的進步,更為AI應用的落地提供了堅實的支撐。只有不斷尋找存儲的最優解,才能確保數據到算力的“最后一公里”暢通無阻,推動數字化和智能化進程邁向新的高度。

 
 
更多>同類天脈資訊
全站最新
熱門內容
媒體信息
新傳播周刊
新傳播,傳播新經濟之聲!
網站首頁  |  關于我們  |  聯系方式  |  版權隱私  |  RSS訂閱  |  違規舉報 魯公網安備37010202700497號