隨著數字化時代的到來,數據滲透于我們生活的方方面面。伴隨著大數據、人工智能、移動互聯網、物聯網、人工智能等技術對生活與商業的滲透,無法否認,我們已進入數字化的新時代。這些變化帶來了當今產業界共同關心的話題,如何更好的存儲海量數據?
西部數據公司副總裁兼中國區業務總經理劉鋼
西部數據,一家在存儲領域深耕51年的領導者,參展2021深圳國際大數據與存儲峰會暨展覽會。此次峰會包含主論壇、圓桌對話、數據存儲、分布式存儲、云存儲、區塊鏈存儲等主題論壇,超過50余場的專業論壇分享。西部數據公司副總裁兼中國區業務總經理劉鋼在大會上帶來了以“創新存儲架構,突破IPFS算力瓶頸”為主題的演講,重點介紹了基于分布式存儲的Web3.0或IPFS的基礎設施架構下相應的存儲技術和解決方案。
在演講中,劉鋼表示:在2024年的時候,以HDD為代表的大數據預計將增長到1.62ZB,那從現在開始到2024年,年化增長率在30%左右。除了大數據以外還有快數據,因為我們不僅想把數據存儲下來,還希望能夠對數據進行挖掘、進行計算,來為客戶的商業提供幫助。
西部數據公司副總裁兼中國區業務總經理劉鋼
根據調研數據,到2024年日常所產生的數據量將超過143ZB,然而,受存儲技術與存儲架構限制,其中,只有約2ZB能夠被存儲下來,占比還不足1.5%。在數字時代下,數據已經成為了我們每個人重要的資產,如何存儲自己的大量數字化資產也是越來越多人將要面臨的問題。
但目前,數據存儲面臨著挑戰。用戶對于存儲的需求總結下來為四個方面,大容量、快速訪問、低成本、還需要低功耗。然而,目前來講仍然無法找到一種存儲介質能夠同時滿足以上要求。但是,換一種思路,將數據存儲劃分為不同的應用場景的需求,再針對應用場景的特性來提供對應的存儲解決方案,這就是存儲架構的創新,即分布式存儲架構。西部數據根據數據使用頻率將其分層,由低到高依次為極冷數據、冷數據、溫數據、熱數據和極熱數據,并針對不同數據層來提供不同存儲解決方案。
西部數據公司副總裁兼中國區業務總經理劉鋼
基于此,IPFS去中心化分布式存儲“應運而生”。 以去中心化為特點的IPFS存儲架構,相較于傳統的中心化思路的云存儲服務商,能夠顯著的節省它們的服務提供成本,進而降低整體系統的存儲成本。同時,有統計數據表明, IPFS存儲相比較云供應商的發展步伐更快,僅僅用了4個季度,18TB大容量硬盤就成為了主流。而且對于用戶選擇更高容量存儲設備的好處是十分明顯的。因為單個硬盤容量密度越高,相應的服務器數量就會減少,這也就意味著單位功耗會降低,相應的部署成本和運營維護成本也會減少。
劉鋼在演講中還分享道,“本季度很多IPFS服務商和云服務商已經在考慮遷移到18T高密度的硬盤。比如Dropbox,全球領先的云存儲服務商,它在去年年底就已經遷移到20T SMR HDD了。通過遷移到20T SMR,得到了更低的總體擁有成本(TCO)與更高的存儲密度。”
與中心化的存儲方式相比,IPFS存儲面向全球構建了一個點對點的分布式版本文件系統,利用哈希的地址來替代基于域名的地址,并且還用點對點的IPFS存儲協議,替代集中式超文本傳輸協議(也就是HTTP)。IPFS將存儲的技術與區塊鏈技術結合,為企業級用戶提供了新的存儲選擇。
在技術方面,劉鋼為在場的行業同仁分享了西部數據近些年進行的一些探索。 以大數據存儲而言,基于其少量寫入、大量讀取、大量數據的應用特性,西部數據將其歸為極冷數據和冷數據類別,并為其提供了業界單碟最高2.2TB,總容量達20TB的Ultrastar DC HC650。盡管業界近些年一直傳HDD將被SSD大規模取代,但目前來講這部分數據更適合成本更低的HDD進行存儲。除了成本更低之外,HDD相較SSD也更適合長時間存儲。對于超大規模數據中心和云計算領域,憑借氦密封技術提供的出色功耗以及機械創新,西部數據HDD容量方面領先業界,還使客戶能夠更有效地配置和擴展數據中心環境,同時提供更低的總體擁有成本。
今年西部數據與合作伙伴鎧俠聯合研發出第六代162層3D閃存技術,采用超越傳統八層交錯式存儲孔陣列的領先架構,其橫向單元陣列密度比第五代技術提高了約10%,能夠使晶圓尺寸減小約40%,每個晶圓的制造位增加了高達70%,從而優化了成本。
峰會現場西部數據展臺
除此之外,西部數據也攜手眾多合作伙伴,將存儲技術和存儲架構應用到IPFS領域。西部數據、星辰天合、浪潮聯合推出的IPFS解決方案,該解決方案搭載了專為 IPFS 場景而生的 XSFS系統,基于通用的 X86 服務器構建了一個無限擴容、持續在線的高性價比存儲架構體系,并且通過部署西部數據Ultrastar DC HC550 18TB硬盤,顯著提高了的存儲容量,同時降低集群的節點數量,節省能耗、機柜空間等相應成本;西部數據還攜手長城超云打造了IPFS“新范式”, 以西部數據高性能大容量企業級硬盤Ultrastar DC HC550 18TB HDD為基礎,設計了異構產品組合的集群測試方案,包括Miner、Worker和Storage,大幅提升了客戶的業務效率,從而增強了客戶在IPFS領域的核心競爭力。
西部數據作為數據存儲行業的領導者,致力于為廣大的用戶群體提供可以滿足不同需求的存儲解決方案。同時,也為了更好的迎接數據井噴式增長,幫助用戶存儲重要的數據,西部數據會就數據存儲架構和高性能解決方案的整體優化,進行更多的技術投入和合作,共同推動未來數據存儲架構的激活和發展。