金庸大俠筆下的武俠世界之所以令人向往,
不僅在于俠客們的快意恩仇,
更在于精彩又不失嚴謹的武學架構,
掌握一部武學秘籍往往意味著獨步武林,
而在存儲界,
一部“武學奧義”同樣暗藏于
深信服企業級分布式存儲EDS最新版本!
●第一式:“外功”強健體魄 ●
——二副本、三副本靈活定義可靠性
所謂內練一股氣,外練筋骨皮,
具備一身強勁的“外功”,
在面對不同的外部情況時都能應對自如。
對一套存儲的可靠性而言,
能夠承載故障發生很重要,
對不同需求進行靈活適配同樣重要。
目前市面上的多數存儲直接為用戶配置了三副本策略,以保障業務的高效運轉以及故障發生時業務的連續,但是三副本意味著要花費更高的成本。新版本EDS從用戶的實際需求出發,為用戶提供更靈活的選擇。
首先,以LUN為粒度配置副本數和性能優先級策略,可以選擇為核心業務配置3副本高性能策略,非核心業務配置2副本低性能策略,實現按照業務需求靈活配置存儲能力。其次,新版本EDS通過塊存儲三副本機制,將三份副本數據互斥分布在多個存儲節點上,當節點發生故障時,可將業務連接快速切換到正常節點進行讀寫,保障業務的連續性。
根據業務需求靈活配置副本
三副本可容納任意2節點故障,但會占3倍于業務數據量的存儲空間,2副本只會占2倍存儲空間,但最大只能容任意1節點故障,新版本EDS支持按照LUN配置副本數,用戶可根據業務的重要性配置,實現業務可靠性和容量利用率的均衡。同時用戶不必花費高昂的成本全部配置三副本,根據業務自主選擇即可。
●第二式:“內功”自行療傷 ●
——硬盤壞道主動預測掃描及修復
如果說靈活定義可靠性相當于強化“外功”,
那么提升自我恢復能力則等于修煉“內功”。
對于存儲硬盤而言,
那些處在“隱秘的角落”的壞道,
讓業務數據在單副本狀態下長期“裸奔”。
最好的防御就是主動出擊,
放在新版本EDS再適合不過。
當硬盤出現壞道時一般不容易被發現,只有當客戶端訪問到壞道的數據且無法進行訪問時,壞道才會被發現。新版本EDS對硬盤進行了全方位保護,結合AI算法模型,推出了硬盤壞道預測、掃描修復及SSD壽命預測等一系列功能。
首先,通過硬盤壞道預測收集分析大量壞道硬盤的SMART數據、性能參數與日志信息,結合算法訓練模型,可以預測出硬盤在未來7天內是否會出現壞道。其次,定時壞道掃描及修復可主動壞道掃描可及時發現潛藏的壞道,并利用壞道數據的另外一個副本將數據修復至硬盤保留扇區。最后SSD壽命預測,通過硬盤Smart信息以及硬盤的寫入量分析,結合算法訓練模型,預測出SSD的剩余可用時間。
硬盤壞道主動掃描及修復
通過壞道預測,壞道掃描和壞道修復形成壞道處理閉環,使硬盤壞道被發現的時長從原來的一個月縮短至一天,并完成修復,最大程度規避數據長期單副本的風險。(實際環境的測試數據,預測準確率高達95%以上)。通過SSD壽命預測,用戶可體檢對于壽命不足的SSD提前進行更換準備,避免硬盤損壞造成的業務宕機。
●第三式:“招式”唯快不破 ●
——億級文件、對象秒級檢索
有道是“天下武功,唯快不破”,
除了“內功”與“外功”之外,
快速的“招式”修煉同樣重要,
目的便是以最高效的方式解決問題。
想要在大數據時代“乘風破浪”,
數據檢索的速率起碼要足夠快。
為了幫助用戶更高效地完成海量數據的快速檢索及調用,新版本EDS為數據建立了單獨的快速索引結構,使得數據能夠在十億級別文件規模下秒級快速檢索。
十億級別文件規模下秒級快速檢索
采用這種將“搜索框”搬到了存儲里面的方式,上億的文件只需要輸入關鍵詞,即可秒級搜索出來想要查找的文件。2億海量文件檢索實測僅需1.8秒。文件檢索效率的提升也降低了用戶的管理成本。
●第四式:“心性”堅如磐石 ●
——億級小文件承載能力
武學之集大成者,
無不胸襟寬廣,心志堅定,
面對再大的壓力及挑戰依然能夠
泰然自若,巋然不動。
海量小文件的穩定承載能力,
是數字時代存儲所要具備的重要素質之一。
EDS利用自主研發的分布式數據庫PhxKV,承載分布式NAS文件系統元數據,使得元數據系統在訪問的時延更低,以及在壞塊修復的時候不阻塞前端業務,而且修復速度極快。小文件可實現寫入即合并,使得存儲內部不存在任何的碎片文件,保證機械盤數據的正常業務讀寫訪問以及數據重構讀寫等等能夠性能不下降,數據重構每TB所需時間小于30mins。
相較于主機文件系統或磁盤陣列NAS存儲,單文件系統支持的文件處理從千萬級提升到億級別。用戶通過軟件即可實現高性能的文件處理需求,不需要支出高昂的成本來購買硬件。
要想真正做到獨步武林,
需要兼備強勁的外功,深厚的內功,
這些素質缺一不可。
深信服新版本EDS向外強化“容障能力”,
向內錘煉“修復能力”,
拔高文件檢索速率,
并強化海量小文件承載能力,
真正做到“內外兼修”。
在原有的高性能,高可靠,智能管理等特性的基礎上,新版本EDS進一步升級,靈活定義可靠性,硬盤壞而可查,檢索快速便捷,性能穩定,為用戶打造更安全、更高效的存儲服務。