乘風破浪亦能不負眾望,在科技迭代迅速推進的當下,企業級存儲市場發生深刻變革的今天,青云QingCloud (qingcloud.com)又是如何披荊斬棘、另辟蹊徑,將QingStor打造成為一款真正面向企業數字化全場景的存儲產品呢?
十年歲月 市場巨變
過去10年里,包括移動互聯網、大數據、5G、AIoT等新興技術應用場景對高容量存儲、復雜場景(如云計算)的存儲提出新的需求。分布式存儲正因為場景的不同正在經歷快速的增長,IDC 2019年市場預測報告顯示,無論是對象存儲、文件存儲還是塊存儲,在未來幾年里都會保持兩位數高速增長。如今的企業內部分布式存儲部署的占比越來越重,甚至在一些企業里超過了傳統存儲。
同時,全閃存儲逐漸成為主流。在所有采用存儲的企業里,全閃存儲幾乎已經占80%的使用率,且未來幾乎每年都會保持50%的高增速。SSD全閃介質的成本正在逐年快速下降,是企業采用全閃存儲最主要的驅動力。
在當下的經濟背景以及世界格局下,國產化已經成為IT廠商和企業客戶關注的重點。QingStor很早就關注到國產化的重要性,此次QingStor升級發布最核心的是把存儲全棧產品線進行國產化。除了軟件架構的部分,底層的芯片和操作系統,也跟很多國產化廠商進行合作和互認證。值得一提的是,QingStor 分布式存儲已經全面適配國產化軟硬件平臺,完成與鯤鵬、飛騰、中科海光、浪潮 OpenPower 等國產芯片的兼容適配測試,實現對統信 UOS、麒麟、歐拉等主要國產操作系統的兼容對接。從軟件架構、底層芯片到操作系統,QingStor 已經全面實現和國產化廠商的兼容、互認證,構建起國產化生態,有效地消除了企業客戶在當下復雜的經濟背景和世界格局下對數據安全的顧慮和擔憂。
為云設計 為云而生
從2012年青云QingCloud推出第一個版本的云計算產品開始,就在存儲的底層堅持100%自研,QingStor全線產品都是從零開始,自主設計、自主研發。與國內眾多廠商基于開源的分布式存儲作為底層進行二次封裝和二次開發,QingStor從架構設計階段就與之有本質的不同。目前,QingStor產品家族里有四款專業存儲產品,共同支撐市面上幾乎全部主流的云計算產品。
QingStor存儲產品線研發負責人王煜
青云QingCloud的產品,包括公有云、私有云等,都是由QingStor作為底層存儲來支撐。而跟其他存儲產品最大的不同在于,QingStor在公有云和私有云是采用同一套架構,同一套代碼實現的??梢哉f,QingStor全線產品是經過公有云和私有云共同的檢驗,得到大規模生產環境驗證的。
同時,青云QingStor能夠對接多個主流的平臺,包括VMware虛擬化平臺、OpenStack云平臺、目前容器領域最火的Kubernetes容器平臺等。作為底層存儲引擎,可以說QingStor是“為云設計、為云而生”的一款產品。
前路艱辛 自研不改
盡管市面上存在許多開源存儲的方式,但沒有一款能完全匹配企業核心業務上云的嚴格要求。不僅僅是傳統存儲對性能、穩定性的要求,更多的是云計算中復雜場景下對于安全性、隔離性、大規模水平擴展能力的要求。
幾乎所有開源的存儲或者基于開源存儲的商業存儲產品,都有通用的、統一的存儲底層,比如Ceph,有一個叫做Radows的對象存儲系統作為底層,向上封裝各種不同的存儲接口。但由于Ceph本身在性能上的弊端,很難承載企業客戶關鍵性的核心業務。除此之外,HDFS是Google 2006年GFS論文的開源實現,它的單點問題、擴展性問題,對互聯網大數據的場景并不通用。HDFS的底層是一個單機文件系統,并沒有做太多的改造。所以單機文件系統本身存在的問題,如海量小文件的問題,HDFS也存在。
作為一家中國企業,青云QingCloud更希望能夠為中國客戶提供全棧自主可控的優質產品,消除企業對數據安全的顧慮,滿足企業核心業務上云的需求。
與眾不同 獨自生長
當前,QingStor存儲家族總共有四款產品:QingStor NeonSAN(分布式塊存儲)、QingStor對象存儲、QingStor文件存儲、QingStor融合存儲,每一款存儲產品都獨立進行架構設計和開發。
企業的存儲場景復雜多樣,極致性能、大容量、高IOPS、高吞吐、通用接口等許多需求不存在一種架構設計能夠完全滿足所有存儲場景。QingStor在技術設計時,采用縮短I/O路徑棧、去掉本地文件系統、提高協議轉換效率等方法,打造了一款擁有極致性能的分布式SAN存儲產品。正是因為這樣的設計,QingStor NeonSAN能夠穩定地支撐企業的核心業務,比如核心數據庫Oracle RAC。到目前為止,市面上可以很穩定、快速地跑Oracle RAC的,幾乎全都是傳統存儲。在分布式存儲里,QingStor NeonSAN應該是第一款,也是唯一一款能夠很好支持Oracle RAC的存儲產品。
QingStor 對象存儲產品經理 賈斌
對象存儲是分布式存儲領域里一個新晉派系,它解決非結構化數據存儲的問題,如海量圖片、音視頻、日志、歸檔備份等需要一次寫入、多次讀取的模型。這些數據的特點在于讀取頻率不高,而數據容量、數據數量極大。因此,QingStor對象存儲設計的核心是承載海量的數據。這次發布的3.0版本,采用完全Share-Nothing的架構,沒有任何單點,每一個組件都是可以無限水平擴展。這一版本的單bucket(存儲桶)可以在支撐100億個對象的同時,性能還不會有所下降——這是非常難得的。
如果存儲技術是整個IT技術的皇冠,文件存儲應該是皇冠上的明珠。文件存儲在技術架構的實現是非常復雜和艱難的,目前在世界范圍內能把文件存儲,尤其是能夠做好一款分布式文件存儲的廠商很少。QingStor文件存儲2.0版本,是為通用場景設計的,接口協議部分可以完整支持POSIX語義接口,從而幫助企業零成本無縫對接企業內部各種應用系統。
一些企業之所以會采用Ceph,通常是想一次采購獲得多種存儲類型和存儲接口,承載各種業務,甚至是他們還不能預期的一些業務。青云QingCloud在CIC 2019云計算峰會上發布了QingStor融合存儲這樣一款高性價比的產品,雖然將前述三款專業存儲在部署層面上做了整合,但是在架構層面上依然保持每一個專業存儲本身的架構特點,底層存儲池融合在QingStor NeonSAN塊存儲中,使用統一的管理界面進行管理。QingStor融合存儲與Ceph最大的區別,也是本質區別——它是一款不妥協的融合存儲。這一產品希望給用戶提供統一管理體驗,即提供統一存儲池的同時,還能完完整整地享受到前三款專業存儲的功能和性能。
重磅升級 持續賦能
全新升級了的管理平臺Portal 3.0,究竟有哪些不同?
與去年發布的2.0版本相比,3.0版本實現了存儲后臺的統一管理,可以用同一個管理后臺管理所有存儲產品。而且運用了很多創新的圖形元素的方式,來增強企業運維人員對存儲的理解。此外,增加了硬盤健康狀況預警功能,對硬盤本身的各種指標抓取做分析,幫助運維人員提早預測系統內部可能發生的故障,從而規避故障問題。
從1.0版本到現在的3.0版本,QingStor NeonSAN 整個產品迭代都在圍繞核心場景打造產品的能力。云平臺/虛擬化、大數據、業務連續性以及容器/云原生,四大場景持續賦能,QingStor NeonSAN分布式塊存儲全新升級的版本,又有哪些特色?
“QingStor NeonSAN、甚至QingStor整個產品線,都脫胎于云服務,天生就可以很好地對接云平臺”,QingStor存儲產品線研發負責人王煜介紹到。除了獲得了VMware存儲的官方認證外,OpenStack平臺、Hyper-V平臺等業界使用比較多的虛擬化平臺、云計算平臺,QingStor NeonSAN均能實現兼容與對接。
針對大數據場景,QingStor NeonSAN 做了特殊設計,如提供互斥卷組的策略來保證存儲的使用率,不造成存儲空間的浪費。
青云QingCloud 能提供一整套以存儲為核心能力的業務連續性解決方案,滿足企業對于底層IT系統具備高可用、災難恢復、連續操作能力的需求,簡化了業務連續性的管理,提高業務連續性的效率。
QingStor存儲產品線產品經理馮相東
為了解決云原生場景中容器持久化儲存問題,青云QingCloud 助力容器平臺、K8s平臺,包括自有的KubeSphere平臺落地生產,提供高性能、可靠性、企業級分布式存儲的能力。在軟件層面之外,為了幫助企業級用戶快速落地容器平臺,推出了KubeSphere KF3000容器一體機,KubeSphere與QingStor NeonSAN兩款產品強強聯合,提供整體的商用級服務。
對于場景能力的提升,QingStor NeonSAN的版本代代更迭,逐漸將產品打磨到極致。使得目前在市面上所有的同類產品,只有青云QingCloud可以為企業級市場提供容器平臺商業化能力的同時,又具備國內比較領先的分布式存儲能力。
不負眾望的 QingStor NeonSAN 3.0版本,四大新增功能亮點滿滿:一,異構存儲池支持。二,卷粒度的QoS。三,在協議層面的全 RDMA 互聯。四,對于業界最主流的 NVMeoF 協議的支持。通過多項優化,在效率、運維、用戶使用友好性等方面,青云QingStor 也在不斷擁抱新的可能。
此外,青云QingCloud重磅推出的QingStor NF6000分布式全閃存儲一體機,看似很平常的硬件配置,通過最小規模的3節點集群,給客戶3節點100萬IOPS的性能指標,并且保證時延在0.5毫秒以下?;跇藴实膞86服務器、普通的硬件配置、普通的以太網絡,以高性價比的硬件形態提供給用戶。該指標是業界主流的中高端全閃陣列性能指標,體現了QingStor NF6000分布式全閃存儲一體機最大的價值。
魚與熊掌 二者得兼
面對日益增長的龐大數量的非結構化數據,需要有一個健壯、開放且成本合理的存儲來承載,對于對象存儲來說,如果要想服務好當下和未來的業務場景,勢必要解決海量存儲和超高性能共存的問題。
QingStor對象存儲3.0 在海量數據存儲能力、整體超高性能、存儲系統開放能力,這三個方向上做重點突破。在數據遷移、數據保護、數據備份、AI視頻監控等更多數據場景, 以更強大、更具優勢的存儲性能,提供存儲海量數據和數據存儲的超高性能兼得的存儲服務。
QingStor 文件存儲研發負責人 黃蒙
QingStor 分布式存儲為云而生,經過 8 年鍛造,已得到數萬企業客戶的肯定和認可。此次全面升級,將引領分布式存儲的前沿發展,解決企業客戶海量數據存儲、共享、應用難題,實現海量數據存儲能力、整體超高性能、存儲系統開放能力的共存。從產品定位到架構設計原則,青云QingCloud 堅持自主研發、自主設計,旨在幫助更多類型的應用更平滑上云,享受到更好的云計算基礎設施帶來的便利。在國產化背景下,QingStor 存儲家族也將能夠為企業堅定信心,給客戶更多國產化落地的選擇,助力企業在數字轉型的市場中乘風破浪。