文/劉禹
面對指數級增長的計算與存儲需求,傳統的計算與存儲架構是否仍然堪用?
在IPF 2021浪潮數據中心合作伙伴大會上,浪潮集團執行總裁、首席科學家王恩東院士指出:2020年以GPU為代表的AI加速芯片所交付的計算力總和已經超過了通用CPU,智算成為智慧時代的核心動力。面對指數級增長的計算需求,計算技術、產品與產業也面臨著新的挑戰,一是多元化的挑戰,也就是計算場景的復雜、計算架構的多元;二是巨量化的挑戰,也就是由巨量模型、巨量數據、巨量算力及巨量應用引發的對現有計算機體系結構的挑戰。
技術與成本的博弈
技術與成本的博弈似乎是一個永恒的話題,對于IT業來說也不例外。在計算領域,從專用處理器到通用處理器再到如今的各類針對不同場景應用的AI處理器;在存儲領域,從本地存儲到外置存儲再到分布式存儲;在存儲介質上,從磁帶到HDD再到SSD。每一項新技術的發展都需要經歷博弈的過程。
但這并不意味著上一代技術就失去了其存在的價值,發明于20世紀50年代的磁帶時至今日仍然有著不少的用戶;誕生于70年代的HDD而言,依舊活躍在各種規模的數據中心里;而SSD作為時代弄潮兒則正在將旗幟插滿目所能及的各個地方。研究機構Trendfocus的數據顯示,在2020年SSD的總出貨量達到3.33億塊超越2.59億塊的HDD;在總容量方面SSD為207EB,HDD則為1ZB,約為SSD的5倍。
換言之,對應場景需求選用合適的方案才是最經濟的選擇。計算如是,存儲亦是。
數據存儲之道 西部數據知道
人工智能的發展離不開大數據“食料”的供給,至于“加工方式”則來自于相應的算法。算法總是在不斷進化的,但待加工的“食料”卻因為儲存成本的原因在不斷流失。
IPF 2021浪潮數據中心合作伙伴大會上展出的部分西部數據企業級存儲解決方案
在IPF2021大會上,西部數據公司副總裁兼中國區業務總經理劉鋼分享了這樣一組數字:“研究顯示預計到2024年,以HDD為代表的大數據將增長到1.62ZB,以SSD為代表的快數據333EB,兩者相加約為2ZB,而當年產生的數據總量將達到142ZB,這意味著僅有不到1.5%的數據會被存儲下來。”
西部數據公司副總裁兼中國區業務總經理劉鋼
數字經濟時代,數據是新的生產資料和關鍵資產,為什么這些關鍵的資產和生產資料沒有被存儲下來?劉鋼認為其中一個重要的原因是存儲架構和存儲技術沒有及時地跟上數據的發展。
長期以來用戶對于存儲的最主要的需求無外乎兩點:足夠大,足夠快。但同時,用戶還需兼顧采購成本及后期的使用成本。“事實上,并沒有單一的存儲設備或是存儲介質能夠同時滿足以上條件。”劉鋼對此說道。
因此,西部數據提出“去中心化分布式存儲、分層存儲和分區存儲”的創新存儲架構來幫助客戶解決當務之急。
利用去中心化分布式存儲架構降低存儲成本,以便讓更多的數據存儲下來,留待后期加工。
進一步細化分層存儲,根據數據對存儲時延和容量的需求細化到極熱、熱、溫、冷、極冷五個層次,并采用對應的產品來滿足需求。
分區存儲,利用ZNS SSD進一步提升性能,同時提高可用容量減少機柜空間占用,從而進一步降低功耗開銷。
西部數據公司副總裁兼中國區業務總經理劉鋼
劉鋼用數字來說明了西部數據能為客戶提供的價值:“為達到同樣的存儲容量,將14TB硬盤更換為18TB硬盤,則能有效的降低22%服務器數量,減少21%的能源消耗。因此,大型的互聯網服務商非常熱衷于采用最新最大的硬盤。對于極冷數據來說,SMR硬盤是一個很好的選擇。”
而對于以SSD為代表的快數據,西部數據同樣可以提供極具競爭力的產品組合。這源于西部數據在企業級SSD領域三大核心競爭力:其一,西部數據與鎧俠目前占有3分之1的市場份額,其強大的產能是持續性供應基礎;其二,最新發布的第六代162層3D閃存技術,其橫向單元陣列密度比上一代提高了約10%,晶圓尺寸減少了40%,IO性能提升了66%,在降低成本的同時滿足了不斷增長的數據處理性能需求;其三,企業級SSD的縱向集成優勢,擁有從晶圓生產到控制器、固件開發的一整套產品集成能力,從而保證可以滿足各種客戶的需求。
攜手浪潮 構建場景共同體
對于此次和浪潮的合作,劉鋼表示:“高速發展的人工智能在對數字經濟產生巨大賦能和推動的同時,也推動整個計算產業往'智慧計算'方向演進,巨量模型和海量數據,對算力和存儲的需求呈指數級增長。我們很高興能持續深化與浪潮的合作,結合雙方前沿科技與產品的獨特優勢,協力打造出高性能、低成本、且兼具穩定性與擴展性等特點的卓越解決方案,優化資源配置,賦能智慧計算。未來,西部數據將與浪潮加強縱深合作,不斷以創新的數據存儲架構和解決方案,應對市場多樣化的需求,并攜手生態系統中的各方伙伴共同推動智能產業的轉型與發展,為行業用戶創造更多價值。”
西部數據公司副總裁兼中國區業務總經理劉鋼
面對當前的市場需求發展,浪潮在IPF 2021大會上提出了“元腦新存儲生態”:“以用戶為中心、以應用為導向”的場景共同體,意味著存儲廠商需要針對不同行業推出不同的產品,場景解決方案會愈發走向細分化,存儲生態所涉及的伙伴也將越來越多。
顯然,這也對所有合作伙伴提出了更高的要求。而西部數據與浪潮的產品與解決方案所形成的合力足以在多方面滿足客戶的需求:對于大數據需求,更高的存儲密度與容量,進一步節省了機柜占用與能耗成本;而對于快數據,兼具性能與成本優勢的多類產品來滿足不同需求層級的場景。