數字經濟時代,數據已成為新的核心生產要素。特別是在航空航天、氣象科學、AI自動駕駛及生命科學等領域,數據呈現指數級增長,以數據密集型為典型特征的高性能數據分析(HPDA)開始出現。
深信服分布式存儲EDS不僅可以滿足計算密集型應用性能需求,也解決了傳統存儲方案拓展性不足與成本過高的問題。
傳統存儲陣列采用專用硬件,拓展性欠佳,且硬件成本過重。在高性能計算場景下,傳統的存儲方案往往選擇采用支持RDMA協議的IB網絡降低網絡時延,而在HPDA這種數據密集型場景下,單一存儲集群節點數量往往可達到兩位數甚至更多,一臺Infiniband交換機的成本相當于數臺存儲節點的硬件成本,在大規模交付的場景下,采用傳統的IB組網架構需要付出更高的成本。
↑ HPDA應用的高性能計算需求給存儲系統帶來挑戰
深信服EDS存儲架構采用了run to complete和無鎖化編程模型,并優化了各模塊之間的數據處理,實現系統內全IO棧的內存零拷貝,使整體性能得到了極大的提升。在關鍵的IO路徑上,EDS采用自研的存儲通信模塊,結合共享內存來實現IO路徑上的數據零拷貝,減少內存拷貝消耗,降低存儲IO時延。
全對稱分布式架構
深信服分布式存儲EDS基于全對稱的分布式架構,單一分布式存儲集群可以橫向拓展至數千節點,單一系統容量可拓展至EB級別,實現系統性能與容量線性增長,并且隨著HPDA應用數據規模增大,EDS平均每TB數據的存儲成本會越來越低。
↑ 隨著存儲系統容量增加,SDS系統性能線性增長的同時,每TB數據存儲成本逐漸降低
支持RDMA RoCEv2協議
為了追求IO時延與成本之間的平衡,深信服分布式存儲EDS創新性地選用RDMA RoCEv2網絡,將存儲節點網絡使用RDMA 協議接入,實現低延遲極速網絡傳輸,有效降低存儲系統建設成本。
平均存儲IO時延在us級別
深信服EDS存儲架構采用了run to complete和無鎖化編程模型,并優化了各模塊之間的數據處理,實現系統內全IO棧的內存零拷貝,使整體性能得到了極大的提升。
↑ EDS關鍵IO流程示意圖
3節點通用2U服務器即可提供6GB/s+吞吐
結合RDMA協議與NVME SSD介質,EDS可以同時發揮NVME SSD的性能優勢與RDMA技術的低時延優勢。采用3臺aStor-EDS1250設備,每臺服務器配置2塊NVME SSD與通用硬盤,即可提供超過6GB/s的性能體驗。
深信服分布式存儲EDS采用通用硬件降低用戶存儲投入成本,再結合過硬的軟件實力激發通用硬件的性能,提高HPDA應用數據存取效率,為用戶提供高性價比的存儲解決方案,助力產業穩健發展。