青云QingCloud (qingcloud.com)的存儲(chǔ)產(chǎn)品線QingStor全線升級(jí)NeonSAN（分布式塊存儲(chǔ)）、對(duì)象存儲(chǔ)、文件存儲(chǔ)和融合存儲(chǔ)四款專業(yè)存儲(chǔ)產(chǎn)品。QingStor存儲(chǔ)產(chǎn)品線的相關(guān)負(fù)責(zé)人對(duì)這些產(chǎn)品進(jìn)行了詳細(xì)解讀。
為云而生
QingStor 存儲(chǔ)產(chǎn)品線研發(fā)負(fù)責(zé)人王煜開門見山地指出："在過(guò)去10年中，企業(yè)級(jí)存儲(chǔ)市場(chǎng)主要呈現(xiàn)出兩大趨勢(shì)。"
QingStor 存儲(chǔ)產(chǎn)品線研發(fā)負(fù)責(zé)人 王煜
其一：分布式存儲(chǔ)經(jīng)歷了快速的增長(zhǎng)期。
根據(jù)IDC在2019年發(fā)布的預(yù)測(cè)報(bào)告，無(wú)論是對(duì)象存儲(chǔ)、文件存儲(chǔ)還是塊存儲(chǔ)，在未來(lái)幾年里都會(huì)保持兩位數(shù)的高速增長(zhǎng)。
而且，在企業(yè)內(nèi)部，分布式存儲(chǔ)的占比越來(lái)越多，在一些企業(yè)里甚至超過(guò)了傳統(tǒng)存儲(chǔ)。究其原因，主要是在過(guò)去10年里，移動(dòng)互聯(lián)網(wǎng)、大數(shù)據(jù)、5G、AIoT等新興技術(shù)的不同應(yīng)用場(chǎng)景對(duì)存儲(chǔ)提出了新需求。
其二：全閃存儲(chǔ)已逐漸成為主流。
IDC市場(chǎng)報(bào)告顯示，在所有采用存儲(chǔ)的企業(yè)里，全閃存儲(chǔ)的使用率已經(jīng)超過(guò)80%。而且，全閃存儲(chǔ)的年均增速超過(guò)了50%。
"這是一個(gè)相當(dāng)驚人的數(shù)字，因?yàn)镾SD全閃介質(zhì)的成本正在逐年下降。我們做過(guò)一個(gè)計(jì)算，按照存儲(chǔ)關(guān)鍵性能指標(biāo)IOPS，目前每單位IOPS對(duì)應(yīng)的價(jià)格，與企業(yè)級(jí)磁盤的價(jià)格不相上下。這是企業(yè)采用全閃存儲(chǔ)最主要的驅(qū)動(dòng)力。"王煜解釋到。
正是因?yàn)榭吹搅诉@樣的變化，QingStor研發(fā)團(tuán)隊(duì)在存儲(chǔ)領(lǐng)域投入了大量的研發(fā)精力。從2012年青云QingCloud推出第一版云計(jì)算產(chǎn)品開始，就在存儲(chǔ)的底層堅(jiān)持采用自主研發(fā)的方式。在過(guò)去的8年里，青云QingCloud在云計(jì)算環(huán)境下積累了大量關(guān)于存儲(chǔ)的需求和技術(shù)實(shí)踐。
目前，QingStor產(chǎn)品家族新誕生的NeonSAN、對(duì)象存儲(chǔ)、文件存儲(chǔ)和融合存儲(chǔ)四款專業(yè)存儲(chǔ)產(chǎn)品，可以支撐市場(chǎng)上幾乎全部主流云計(jì)算產(chǎn)品。除了青云QingCloud的公有云、私有云，還有VMware虛擬化平臺(tái)、OpenStack云平臺(tái)，目前容器領(lǐng)域最火的Kubernetes容器平臺(tái)等等，都可以由QingStor作為底層存儲(chǔ)來(lái)支撐。"可以說(shuō)，QingStor就是'為云設(shè)計(jì)、為云而生 '的產(chǎn)品。"王煜強(qiáng)調(diào)。
如今，QingStor的產(chǎn)品家族已經(jīng)積累了數(shù)萬(wàn)家企業(yè)客戶。在公有云領(lǐng)域，QingStor全線產(chǎn)品已經(jīng)部署在青云QingCloud的8個(gè)公有云區(qū)。在私有云領(lǐng)域，QingStor幾乎覆蓋了全部主流行業(yè)，包括銀行、保險(xiǎn)、證券、制造、能源、醫(yī)療、教育、政府等等。要特別強(qiáng)調(diào)的是，QingStor在公有云和私有云中采用的是同一套架構(gòu)、同一套代碼。也就是說(shuō)，QingStor全線產(chǎn)品是經(jīng)過(guò)公有云和私有云的共同檢驗(yàn)，經(jīng)過(guò)大規(guī)模生產(chǎn)環(huán)境驗(yàn)證的。
自主研發(fā)
令青云QingCloud人自豪的是，QingStor全線產(chǎn)品是100%自主設(shè)計(jì)、自主研發(fā)的。從架構(gòu)設(shè)計(jì)階段開始，QingStor就采用了自己的設(shè)計(jì)理念，完全區(qū)別于基于開源存儲(chǔ)二次開發(fā)的商業(yè)存儲(chǔ)公司。
在談到為什么要選擇自主研發(fā)這條艱難的道路時(shí)，王煜解釋到，主要是基于兩點(diǎn)原因：
第一，企業(yè)核心業(yè)務(wù)上云時(shí)，對(duì)于存儲(chǔ)的要求是非常嚴(yán)格的，不僅僅要求性能和穩(wěn)定性，還要考慮到云計(jì)算場(chǎng)景下的安全性、隔離性，以及大規(guī)模的擴(kuò)展能力。而市場(chǎng)上主流的開源存儲(chǔ)都無(wú)法完全滿足上述要求。
第二，作為一家中國(guó)企業(yè)，青云QingCloud希望能夠?yàn)橹袊?guó)企業(yè)客戶提供全棧自主可控的優(yōu)質(zhì)產(chǎn)品服務(wù)，從而消除企業(yè)對(duì)數(shù)據(jù)安全的顧慮。
王煜表示："此次QingStor升級(jí)發(fā)布最核心的就是把存儲(chǔ)全棧產(chǎn)品線進(jìn)行國(guó)產(chǎn)化。除了軟件架構(gòu)，在底層的芯片和操作系統(tǒng)領(lǐng)域也與很多國(guó)產(chǎn)化廠商達(dá)成了合作和互認(rèn)證，如鯤鵬、海光、飛騰、麒麟、統(tǒng)信軟件、OpenPower等等。希望通過(guò)國(guó)產(chǎn)化適配，能夠讓QingStor存儲(chǔ)產(chǎn)品線實(shí)現(xiàn)全棧國(guó)產(chǎn)化，從而消除企業(yè)客戶的擔(dān)憂和顧慮。"
據(jù)介紹，與開源存儲(chǔ)采用通用的存儲(chǔ)底層不同，QingStor的四款產(chǎn)品在架構(gòu)設(shè)計(jì)時(shí)，每一款都采用了獨(dú)立的設(shè)計(jì)方式。因?yàn)槠髽I(yè)的存儲(chǔ)場(chǎng)景是多樣而復(fù)雜的，不存在一種架構(gòu)設(shè)計(jì)能夠完全滿足所有的存儲(chǔ)場(chǎng)景。有些場(chǎng)景需要極致性能，有些場(chǎng)景需要大容量，有些場(chǎng)景需要高IOPS，有些場(chǎng)景需要高吞吐，有些場(chǎng)景需要通用的接口。所以，青云QingCloud在設(shè)計(jì)時(shí)，把存儲(chǔ)場(chǎng)景劃分為熱數(shù)據(jù)、冷數(shù)據(jù)、溫?cái)?shù)據(jù)以及混合場(chǎng)景。
為極致性能設(shè)計(jì)的NeonSAN
在設(shè)計(jì)QingStor NeonSAN時(shí)，青云QingCloud希望打造一款擁有極致性能的分布式存儲(chǔ)產(chǎn)品，所以縮了短I/O路徑棧，去掉了本地文件系統(tǒng)，提高了協(xié)議轉(zhuǎn)換效率。正是因?yàn)檫@樣的設(shè)計(jì)，QingStor NeonSAN能夠穩(wěn)定支撐企業(yè)的核心業(yè)務(wù)，如核心數(shù)據(jù)庫(kù)Oracle RAC。"目前市面上可以穩(wěn)定、快速地跑Oracle RAC的，幾乎都是傳統(tǒng)存儲(chǔ)。在分布式存儲(chǔ)里，QingStor NeonSAN應(yīng)該是第一款，也是唯一一款能夠很好支持Oracle RAC的存儲(chǔ)產(chǎn)品。"
據(jù)QingStor存儲(chǔ)產(chǎn)品線產(chǎn)品經(jīng)理馮相東介紹，QingStor NeonSAN 3.0版本新增了異構(gòu)存儲(chǔ)池支持、卷粒度的QoS、全RDMA互聯(lián)、以及支持NVMeoF協(xié)議四大功能。
QingStor存儲(chǔ)產(chǎn)品線產(chǎn)品經(jīng)理 馮相東
從1.0版本迭代到現(xiàn)在的3.0版本，QingStor NeonSAN一直都圍繞核心場(chǎng)景來(lái)打造產(chǎn)品能力，持續(xù)賦能云平臺(tái)/虛擬化、大數(shù)據(jù)、業(yè)務(wù)連續(xù)性，以及容器/云原生場(chǎng)景。
作為一款可以獨(dú)立售賣的分布式塊存儲(chǔ)，QingStor NeonSAN 除了能與QingCloud云平臺(tái)對(duì)接，還能與VMware平臺(tái)、OpenStack平臺(tái)、Hyper-V平臺(tái)對(duì)接。
針對(duì)大數(shù)據(jù)場(chǎng)景，NeonSAN提供了互斥卷組策略，可以提高存儲(chǔ)的使用率，提升大數(shù)據(jù)應(yīng)用存儲(chǔ)的效率，不造成存儲(chǔ)空間的浪費(fèi)。
針對(duì)業(yè)務(wù)連續(xù)性場(chǎng)景，NeonSAN能夠與青云QingCloud 云平臺(tái)一起，統(tǒng)一管理云平臺(tái)上的計(jì)算資源、網(wǎng)絡(luò)資源、存儲(chǔ)資源，提供一套完整的業(yè)務(wù)連續(xù)性管理的解決方案，滿足業(yè)務(wù)對(duì)不同RPO/RTO的要求，簡(jiǎn)化對(duì)業(yè)務(wù)連續(xù)性的管理，提高業(yè)務(wù)連續(xù)性的效率。
針對(duì)云原生場(chǎng)景，NeonSAN 可以為K8s、KubeSphere容器平臺(tái)提供高性能、可靠性、企業(yè)級(jí)分布式存儲(chǔ)的能力。
此外，青云QingCloud還推出了KubeSphere KF3000容器一體機(jī)和QingStor NF6000分布式全閃存儲(chǔ)一體機(jī)。前者結(jié)合了KubeSphere 以及QingStor NeonSAN兩款產(chǎn)品的能力，可以幫助企業(yè)級(jí)用戶快速落地容器平臺(tái)。后者可以實(shí)現(xiàn)3節(jié)點(diǎn)100萬(wàn)IOPS的性能指標(biāo)，保證時(shí)延在0.5毫秒以下，達(dá)到了業(yè)界主流的中高端全閃陣列性能指標(biāo)。
為海量數(shù)據(jù)設(shè)計(jì)的對(duì)象存儲(chǔ)
對(duì)象存儲(chǔ)是分布式存儲(chǔ)領(lǐng)域里的新晉派系，用來(lái)解決非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)的問(wèn)題，如圖片、音視頻、日志、歸檔備份等等。
根據(jù)IDC的研究報(bào)告，全球數(shù)據(jù)總量已經(jīng)達(dá)到50ZB，其中80%為非結(jié)構(gòu)化數(shù)據(jù)。這些數(shù)據(jù)讀取的頻率不是特別高，通常是一次寫入、多次讀取的，但是其數(shù)據(jù)容量、數(shù)量都非常大，需要一個(gè)健壯、開放且成本合理的存儲(chǔ)來(lái)承載。因此QingStor對(duì)象存儲(chǔ)設(shè)計(jì)的核心就是承載海量數(shù)據(jù)。
據(jù)QingStor對(duì)象存儲(chǔ)產(chǎn)品經(jīng)理賈斌介紹，QingStor對(duì)象存儲(chǔ)3.0不僅可以服務(wù)更多的數(shù)據(jù)場(chǎng)景，如數(shù)據(jù)遷移、數(shù)據(jù)保護(hù)、數(shù)據(jù)備份、AI視頻監(jiān)控，還帶來(lái)了更強(qiáng)大、更具優(yōu)勢(shì)的存儲(chǔ)性能，可以應(yīng)對(duì)更復(fù)雜多樣的用戶需求。其新增的功能包括對(duì)象版本控制、數(shù)據(jù)追加寫入、數(shù)據(jù)跨區(qū)域復(fù)制和官方生態(tài)工具升級(jí)。
QingStor對(duì)象存儲(chǔ)產(chǎn)品經(jīng)理 賈斌
在數(shù)據(jù)遷移場(chǎng)景中，QingStor對(duì)象存儲(chǔ) 3.0帶來(lái)了數(shù)據(jù)跨區(qū)域復(fù)制，全新重構(gòu)的官方工具 qsctl和qscamel。通過(guò)這些新功能和工具，在數(shù)據(jù)遷移中能夠?qū)缙脚_(tái)及復(fù)雜場(chǎng)景實(shí)現(xiàn)全覆蓋。
在數(shù)據(jù)保護(hù)場(chǎng)景中，實(shí)現(xiàn)了存儲(chǔ)桶（Bucket）內(nèi)數(shù)據(jù)的歷史版本存儲(chǔ)和管理，解決了企業(yè)級(jí)用戶對(duì)數(shù)據(jù)意外刪除、意外覆蓋、惡意篡改等問(wèn)題，對(duì)金融、政務(wù)、公共安全等行業(yè)的意義重大。
在數(shù)據(jù)備份場(chǎng)景中，解決了數(shù)據(jù)恢復(fù)緩慢、整體成本高昂、運(yùn)維管理復(fù)雜等問(wèn)題，而且整體成本更低。
在AI與視頻監(jiān)控場(chǎng)景中，數(shù)據(jù)追加寫入的接口、為智能終端定制的SDK，以及混合云存儲(chǔ)的解決方案，可以更好的解決云時(shí)代下視頻監(jiān)控的新需求，也就是數(shù)據(jù)寫入的超高并發(fā)要求、數(shù)據(jù)AI分析與應(yīng)用。
"隨著業(yè)務(wù)場(chǎng)景越來(lái)越復(fù)雜多樣，對(duì)存儲(chǔ)性能的要求也越來(lái)越高，但QingStor對(duì)象存儲(chǔ) 3.0的單桶數(shù)據(jù)超過(guò)百億時(shí)，性能依然保持穩(wěn)定，這在整個(gè)對(duì)象存儲(chǔ)行業(yè)里是非常少見的。"賈斌談到,"都說(shuō)'魚和熊掌不可兼得'，但這是一款'魚和熊掌'兼得的存儲(chǔ)服務(wù)，兼得海量數(shù)據(jù)和超高性能。"
為通用場(chǎng)景設(shè)計(jì)的文件存儲(chǔ)
"如果說(shuō)存儲(chǔ)技術(shù)是IT技術(shù)中的皇冠，那么文件存儲(chǔ)就是皇冠上的明珠。"王煜表示，文件存儲(chǔ)在技術(shù)架構(gòu)實(shí)現(xiàn)上是非常復(fù)雜和艱難的，目前能把文件存儲(chǔ)，尤其是分布式文件存儲(chǔ)做好的廠商少之又少。
QingStor 文件存儲(chǔ)研發(fā)負(fù)責(zé)人黃蒙告訴記者，此次發(fā)布的QingStor文件存儲(chǔ)2.0版本是為通用場(chǎng)景設(shè)計(jì)的，擁有通用的標(biāo)準(zhǔn)文件接口，多層次的擴(kuò)展性，可以同時(shí)適配差異化的文件存儲(chǔ)需求。
QingStor 文件存儲(chǔ)研發(fā)負(fù)責(zé)人 黃蒙
"企業(yè)中大部分應(yīng)用都依賴于標(biāo)準(zhǔn)文件接口，不支持標(biāo)準(zhǔn)文件接口就意味著應(yīng)用系統(tǒng)需要改造，去適配存儲(chǔ)系統(tǒng)，這有點(diǎn)本末倒置。"黃蒙指出，在統(tǒng)一命名空間中，每個(gè)目錄下支持的訪問(wèn)處理能力、空間容量、文件數(shù)量都需要具備水平擴(kuò)展能力，這才是真正意義上的可擴(kuò)展架構(gòu)。市場(chǎng)上同類型產(chǎn)品的架構(gòu)擴(kuò)展性往往是有限的或缺失的，而QingStor 文件存儲(chǔ)架構(gòu)中的文件容量和接入節(jié)點(diǎn)訪問(wèn)處理能力都可以水平擴(kuò)展。
據(jù)悉，QingStor文件存儲(chǔ)2.0版的性能也達(dá)到了新高，可以提供更優(yōu)的局部服務(wù)架構(gòu)和更好的編程語(yǔ)言助力。更優(yōu)的局部服務(wù)架構(gòu)讓Cache的利用率顯著提高，總體占用內(nèi)存資源更少；減少了多個(gè)節(jié)點(diǎn)對(duì)同一個(gè)文件的并發(fā)寫入沖突；當(dāng)I/O服務(wù)出現(xiàn)故障時(shí)，可以做更平滑的故障切換。更好的編程語(yǔ)言就是系統(tǒng)開發(fā)編程語(yǔ)言的新貴--Rust語(yǔ)言，這款被微軟、AWS、Facebook看好的語(yǔ)言，不僅安全、高效，還可以將bug風(fēng)險(xiǎn)扼殺在搖籃里。
黃蒙表示："從產(chǎn)品定位到架構(gòu)設(shè)計(jì)原則，我們做的所有的努力, 都是希望打造一款在云計(jì)算基礎(chǔ)架構(gòu)下更加通用的文件存儲(chǔ)產(chǎn)品，希望這款產(chǎn)品能幫助更多應(yīng)用平滑上云，享受到云計(jì)算基礎(chǔ)設(shè)施帶來(lái)的便利。"
為高性價(jià)比設(shè)計(jì)的融合存儲(chǔ)
QingStor融合存儲(chǔ)則是為高性價(jià)比設(shè)計(jì)的，一套架構(gòu)可以提供多種接口，而且基于NeonSAN的統(tǒng)一存儲(chǔ)池，使用統(tǒng)一的界面進(jìn)行管理。王煜指出："QingStor融合存儲(chǔ)與Ceph最大的區(qū)別在于，它是一款不為性能妥協(xié)的融合存儲(chǔ)。我們希望給用戶提供統(tǒng)一的管理體驗(yàn)，提供統(tǒng)一存儲(chǔ)池的同時(shí)，還能讓用戶完完整整地享受到前三款專業(yè)存儲(chǔ)的功能和性能。"
據(jù)悉，在本次發(fā)布的新版本中還全新升級(jí)了管理平臺(tái)Portal 3.0，升級(jí)的核心點(diǎn)一是加入了對(duì)象存儲(chǔ)管理，實(shí)現(xiàn)了存儲(chǔ)后臺(tái)的統(tǒng)一管理，可以用同一個(gè)后臺(tái)管理所有存儲(chǔ)產(chǎn)品；二是增加了很多創(chuàng)新的圖形元素，可以增強(qiáng)運(yùn)維人員對(duì)存儲(chǔ)的理解；三是增加了硬盤健康狀況預(yù)警功能，可以把硬盤指標(biāo)抓出來(lái)分析，幫助運(yùn)維人員在硬盤發(fā)生故障之前，預(yù)測(cè)系統(tǒng)內(nèi)部可能發(fā)生的故障，從而規(guī)避問(wèn)題。
經(jīng)過(guò)8年鍛造，QingStor系列存儲(chǔ)產(chǎn)品再一次全面升級(jí)，從各種站在用戶的出發(fā)點(diǎn)和業(yè)務(wù)場(chǎng)景化的設(shè)計(jì)中，我們看得出青云QingCloud堅(jiān)持的"匠心"。那么，這些主打?yàn)樵贫⒆灾餮邪l(fā)、自主設(shè)計(jì)、高性能、高性價(jià)比、國(guó)產(chǎn)化的存儲(chǔ)產(chǎn)品，能打破現(xiàn)有的存儲(chǔ)市場(chǎng)格局嗎？時(shí)間終會(huì)告訴我們答案，讓我們拭目以待吧。
