當下,隨著企業數字化發展進入到深水區,數據已經成為企業核心生產要素,數據的存儲、管理、迭代、應用都變得越發重要。
尤其是隨著各行業“云化”和數字化轉型的不斷深入,越來越多的企業基于云原生技術來構建、管理應用,充分利用云的優勢來助力業務創新,而存儲系統一直以來都是基礎設施軟件中的核心之一。
場景和算力推動存儲行業發生變革
目前,海量應用的興起,數據量呈現爆炸式增長,數據類型也更加多樣復雜。據IDC預測,全球數據量預計2025年將達到175ZB,其中非結構化數據占比將高達80%。
另據Gartner預測,到2025年有75%的企業所生成的數據會在數據中心或云之外進行創建或處理。此外,數據的類型也在發生變化,隨著技術的各種深入應用,視頻、音頻、影像等各種非結構化數據的增長更為迅速。
數字經濟時代到來,也讓我們日常生產和生活發生改變,青云科技存儲產品總監馮相東曾分享道:“在自動駕駛汽車行業,其出貨量已經達到3000多萬輛,一輛自動駕駛汽車滿負荷做測試的情況下,每天可以產生的數據量可以達到數TB甚至數十TB。再比如,全球物聯網終端的設備數量,現在已經達到100多億,通常情況下,一家智慧工廠每天產生的數據量都可以達到PB級。除此之外,還有大量AR/VR的終端設備、5G 基站,這些設備都在不斷采集和產生新的數據。”
上述數據體現出場景和算力的變化:
首先是場景的變化。過去二三十年,企業從最早期階段的傳統OA應用、數據庫,到后來的互聯網時代、移動互聯網時代,再到近幾年的5G、AI、IoT,甚至類似元宇宙的概念,其實場景是在不斷發生變化的。新應用層出不窮,隨之不斷產生新的數據形態,導致針對這些數據分析的需求也是在不斷變化的。
在變化過程中,存儲作為整個數據管理的核心,其重要性也越來越明顯。這也說明場景的變化影響整個存儲產業往前演進。
還有另外一個維度,就是算力的變化。算力的演進對存儲形態變化也起到非常重要的影響作用,最初計算能力的承載,大部分使用物理機,后來會使用到虛擬化、云計算,再后來,開始越來越多地轉向容器平臺、云原生。
在場景和算力推動整個存儲形態往前變革的基礎上,還有這些年大家一直在討論的熱點話題,也是和存儲緊密相關的,就是如何讓數據更好地流動起來。
在數據流動的完整鏈條里,我們可以看到從最初的采集、處理到后面的歸檔、再利用、銷毀,都會涉及存儲與大數據技術、存儲與AI計算技術的結合,這能讓數據更高效地被捕獲、被索引、被分析和被加工,從而實現數據層面的點石成金。
青云自研存儲能力幾何?
目前,青云經過整個存儲產品的演進,QingStor產品線主要有兩款核心產品構成:一是QingStor NeonSAN,二是QingStor U10000。
首先是QingStor NeonSAN,它主要面向的場景是云盤、數據庫以及虛擬化存儲資源池場景的應用。
作為一款分布式塊存儲,其整個設計原則是為I/O極致性能而設計的。所以它有幾個關鍵性能的指標,比如NeonSAN最短的I/O時延可以控制在50微秒左右;只需要3臺NeonSAN的節點,就可以給到業務100萬的IOPS。
而QingStor U10000主要面向非結構化數據的場景,這里主要包括各種影像數據、音視頻數據、數據湖、大數據、物聯網等場景。
該產品設計初衷就是幫助客戶更好實現海量數據的價值挖掘,產品的核心特點包括,同時提供對象、文件、大數據接口,不同協議之間實現數據無損訪問互通;單存儲桶支持100多億個對象,并且性能不會隨之下降。
兩款產品有各自面向的專業場景,有各自專業的分工,這也意味著,青云沒有用一種架構同時滿足結構化和非結構化的數據場景。因為從專業技術的視角來看,一種存儲架構不可能同時做到既能滿足極致的性能設計要求,也能滿足海量數據吞吐、計算、并發利用的需求。青云希望通過專業的存儲分工能更好地服務專業的場景。
其中,U10000是青云在多年存儲技術積累基礎上的一次產品全面升級。它繼承了原來青云對象存儲、文件存儲的所有能力,并且在多個維度上實現了產品力的增強和迭代。
馮相東表示:“QingStor U10000相比于之前的QingStor對象存儲和文件存儲,除了產品力的全面繼承,主要在以下幾個方面有一些明顯的提升:實現數據協議的互通,功能和性能的增強,整個算力平臺對接的強化。”
我們可以看到,U10000的基本架構主要包括接入服務層、存儲服務層和統一運維管理平臺三大模塊。
而除了核心架構以外,QingStor U10000平臺還具備了三大核心特點:
首先是U10000作為面向海量非結構化數據的存儲平臺,最基本的特點是首先具備了支撐海量數據存儲的能力,同時保證提供卓越的性能。
其次,U10000具備多協議無損互通,從而實現數據的訪問和流通的高效,包括統一索引架構,提供多種存儲能力、多協議存儲接口供選擇、協議互通,讓數據分析更高效。
最后是與算力的無縫對接,讓數據點石成金。得益于青云多年的積累,U10000具備豐富的數據處理的功能特性,能夠提供一系列完善的API、SDK,可以輕松地對接大數據平臺、數據處理的框架和服務,實現數據和算力的高效結合,最終讓數據實現點石成金。
針對于企業關注的數據安全方面,U10000也從元數據和存儲數據的分層設計、多重訪問安全機制、智能預警機制,以及功能服務的運維監控平臺等幾個維度來保障數據安全。
我們發現,通過U10000的發布,青云讓存儲產品更落地場景,旨在幫企業解決業務問題,而不僅僅是增強IT能力。
寫在最后
一直以來,青云對軟件定義存儲的思考不是孤立的,他們會把核心聚焦在如何滿足算力對存儲的需求這個維度上,讓存儲更好地賦能算力。
總結下來,青云經過數年的積累,以核心技術為基石,打造了一條完整的、富有競爭力的分布式存儲產品線,并已全面兼容業內主流國產化平臺。另外,由于云廠商的自帶基因,其存儲產品在和云原生技術的結合上,有自己先天的優勢。