文|宋辰
編輯|李薇
從響應需求到塑造未來,或許,這才是這一輪AI浪潮最大的價值。
當大模型訓練數(shù)據(jù)量突破ZB級,存儲正成為算力之外的新戰(zhàn)場。
大咖科技
Tech Chic
AI正在吃掉存儲的“未來”
當ChatGPT每天吞噬1PB訓練數(shù)據(jù),當Sora生成1分鐘視頻需百GB存儲空間,人類數(shù)據(jù)的創(chuàng)建和復制正在以近乎瘋狂的速度增長。
IDC《2024-2028年全球數(shù)據(jù)圈預測》顯示,2005年全世界創(chuàng)建和復制的數(shù)據(jù)總量將近1ZB。然而20年后,僅在2024財年一年,希捷一家供貨商的硬盤出貨量就已經(jīng)累計達到550EB,相當于半ZB。IDC預測,到2028年全球的數(shù)據(jù)量將會膨脹到394ZB,中國數(shù)據(jù)生產(chǎn)量將達到100ZB,這一規(guī)模的增長主要受生成式AI等前沿技術驅動。
“這不是數(shù)據(jù)增長,是數(shù)據(jù)爆炸。”希捷CEO Dave Mosley在2025投資者大會上坦言。
不可否認,四重壓力正撕裂傳統(tǒng)存儲架構。
第一重壓力來自更快的數(shù)據(jù)創(chuàng)建速度。過去150年拍攝的150億張照片,AI時代,只需要1.5年就能創(chuàng)造出同樣體量的數(shù)據(jù),無論是推理計算、視頻應用還是機器學習場景,這些新興應用正以空前的規(guī)模產(chǎn)生數(shù)據(jù);
第二重壓力,數(shù)據(jù)正在被復制并存儲在更靠近數(shù)據(jù)讀取段的某個地點或設備上,因為終端用戶總是希望可以提高訪問速度,如今通用人工智能將數(shù)據(jù)從文本轉換為圖像,再轉換為視頻通常是以秒為單位輸出的;
第三重壓力來自訓練數(shù)據(jù)的高保真化要求,由于大模型訓練需保留全精度中間數(shù)據(jù),越來越多的數(shù)據(jù)被復制甚至轉換;
第四重壓力則來自數(shù)據(jù)主權意識的覺醒。無論是從美國上市公司會計監(jiān)管改革法案SOX,還是歐盟的通用數(shù)據(jù)保護條例 GDPR,當前150個國家都有某種程度的數(shù)據(jù)保護法,并且強制本地化存儲。
這不是簡單的容量挑戰(zhàn),而是存儲技術路線的生死抉擇。
大咖科技
Tech Chic
納米工程重塑存儲底層邏輯
在鄭州超聚變大會的展臺上,希捷HAMR硬盤在透明機箱中安靜旋轉;而在萬里之外的硅谷希捷實驗室里,工程師正測試下一代存儲的納米工程技術。
“這一技術轉型并不容易,但我們很高興地說,我們已經(jīng)度過了難關。”Mosley說。
傳統(tǒng)的垂直磁記錄PMR技術已觸達物理極限。2010到2020年的十年間,單塊硬盤里的碟片數(shù)從5片增至10片,但單碟密度停滯不前。當AI數(shù)據(jù)中心每月新增EB級存儲需求,希捷押注熱輔助磁記錄技術HAMR。
這項耗資數(shù)十億美元、研發(fā)20年的技術,正以納米級工程重構存儲底層邏輯。
依靠集成激光器在納秒內將磁性記錄介質加熱到800°F,鐵鉑合金介質使數(shù)據(jù)位密度提升300%,從而實現(xiàn)更高的面積密度。這種能力直接轉化為更大的容量,而不會增加物理驅動器大小。
2024 年,希捷工程師在實驗室環(huán)境中實現(xiàn)了單碟6.5TB的存儲密度,依托HAMR技術的持續(xù)創(chuàng)新,預計到2028年希捷將實現(xiàn)單碟 10TB。2032 年前后,有望實現(xiàn)單盤容量100TB。
“這很難復制。”首席技術官John Morris表示,“這又開啟了十年或更長時間的產(chǎn)品創(chuàng)新。”
大咖科技
Tech Chic
從數(shù)據(jù)中心到邊緣的綠色重構
數(shù)據(jù)洪流奔涌而至,存儲的邊界正在被重新定義。當全球數(shù)據(jù)版圖以ZB為單位擴張時,存儲技術的每次突破都在為AI世界構筑新的地基。
隨著HAMR技術在整個希捷產(chǎn)品組合中進行更廣泛的部署,存儲技術的突破正在真真切切地從概念驗證轉向規(guī)模化。
去年初,希捷發(fā)布了Mozaic 3+(以下簡稱“魔彩盒3+”)平臺,讓單碟容量超過3TB。魔彩盒技術能夠以最小的集成復雜度實現(xiàn)單盤10TB到40TB的容量擴展,這使其能夠很好地滿足數(shù)據(jù)主權和新的存儲架構的需求。
目前魔彩盒3+系列硬盤已實現(xiàn)單盤30TB容量,并且實現(xiàn)了批量出貨,通過了三家頭部云服務提供商的認證,更多客戶正在進行產(chǎn)品的導入測試。在中國市場,百度智能云和超聚變已經(jīng)完成了對希捷Exos M 30TB大容量企業(yè)級硬盤的驗證測試。
對于數(shù)據(jù)中心運營商來說,電力消耗和空間利用率都是對于降低總擁有成本TCO起著至關重要的作用。希捷預計,魔彩盒4+技術將于今年晚些時候啟動認證測試,屆時單碟容量將達到4TB以上。
通過提升每平方英寸的存儲數(shù)據(jù)量,希捷得以減少大規(guī)模部署所需的硬盤數(shù)量。當前,數(shù)據(jù)中心采用的上一代硬盤記錄技術PMR的硬盤平均容量是12TB,采用魔彩盒4+系列硬盤將讓機房空間利用率 3.3 倍,能源效率降低 3.5 倍,碳排放量降低 3.7 倍。
以部署1EB存儲為例,使用魔彩盒4+ 40TB的硬盤將比使用24TB的PMR硬盤減少用17000臺設備,這意味著,無論是在場地、能源,還是運營方面都能實現(xiàn)顯著的成本節(jié)約。
希捷預計到下一個財年的下半年,大約會有50%出貨量的產(chǎn)品在魔彩盒平臺上生產(chǎn)。
提起TCO,一個不能規(guī)避的問題是硬盤HDD和全閃存SSD。希捷全球執(zhí)行副總裁暨首席商務官鄭萬成直言不諱:“硬盤的成本仍比SSD低六倍,而且這個差距不會縮小。”他還提到,硬盤生產(chǎn)的資本支出效率(Capex)維持在4%~6%的區(qū)間,而NAND和DRAM的這一比例超過35%。
“行業(yè)先行者”到“變革領導者”,誰能充分釋放AI的顛覆性潛力,誰就能成為最后的大贏家。
AI時代,真正的存儲巨頭絕不會是設備的搬運工,而是數(shù)據(jù)背后的價值架構師。未來存儲市場的王者,必將屬于那些能駕馭數(shù)據(jù)密度和速度的革新者。
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.