新的時代——數字經濟時代！
新的負載——全球自動駕駛汽車已累計出貨3600多萬輛，一輛無人駕駛汽車每天可產生約4TB的數據量；全球物聯網終端設備的部署量達123億，一家智慧工廠每天產生的數據量可達PB級；全球5G基站的數量已達237萬個，一家云視頻供應商每天產生的數據也達到了1PB……
那么，新的存儲在哪里呢？海量且爆炸性增長的數據，以及以圖片、音頻、視頻和日志類數據為代表的非結構化數據的處理，呼喚存儲的快速創新與迭代。
專業存儲服務專業場景
談到存儲未來的演進趨勢，青云科技存儲產品總監馮相東歸納了三大驅動力，即場景化推動、算力的演進、數據的流動。近幾年，隨著5G、AI、IoT甚至元宇宙的概念興起，新的應用場景、新的工作負載對存儲提出了新的要求；客戶對于算力無止境的追求，加速了存儲從虛擬化到云計算乃至云原生的轉變；數據只有流動起來才能更好地創造價值，支持數據的全生命周期，從采集、處理到后面的歸檔、再利用甚至銷毀，都離不開存儲。
如果說馮相東總結的是存儲持續演進的內在驅動力，那么國家政策、市場推動則是強有力的外在驅動。從國家的“十四五”規劃到2035年遠景目標，從數字中國建設到產業數字化和數字產業化，滿足數字化轉型的需求成了存儲創新的基石。另外，像“新基建”“東數西算”這些工程和項目的落地，存儲都是其中最核心的技術支撐之一。存儲正在迎來新的黃金發展時期。
存儲是一個需要提前布局、長期積累、專業發展的行業，臨時抱佛腳不行，投機取巧更行不通。作為存儲陣營中一支特殊的力量，云服務商們又是如何破解存儲專業發展這一難題的呢？“專業存儲服務專業場景。”青云科技的回答簡潔而有力。青云科技QingStor存儲產品線的發展始終堅持技術與場景需求的同步，這才有了目前面向結構化數據的存儲QingStor NeonSAN與面向非結構化數據的存儲QingStor U10000的同步發展。歸納起來，QingStor NeonSAN主要針對的是云盤、數據庫以及虛擬化存儲資源池等應用場景，為實現I/O的極致性能而設計；而QingStor U10000主要針對各種影像數據、音視頻數據，以及數據湖、大數據、物聯網等應用場景，旨在幫助客戶更好地挖掘海量數據的價值。
不可否認，支持塊數據的SAN存儲仍是企業級存儲應用的主流，因為它們是數據庫等關鍵應用不可或缺的底座。但是從越來越多新興的應用來看，非結構化數據不僅量大，而且增長迅猛，更好地存儲并挖掘其價值對于加速企業的數字化轉型大有裨益。因此，各廠商都加大了對非結構化數據存儲的投入和研究，產品形態、功能日益豐富。青云科技通過QingStor NeonSAN和QingStor U10000兩個獨立的產品，或者說兩種獨立的軟件架構，分別支撐結構化數據和非結構化數據兩大類場景，就是希望以專業的分工、專業的服務，更好地滿足不同客戶的需求，兩類產品都做到極致。
“全自研”做對了
塊存儲的發展歷史相對更長，也正因為如此，這一市場長期為國外廠商所主導。作為后來者，中國廠商一直處于跟跑地位。大數據概念的出現，讓人們對非結構化數據有了更多更深入的了解，占數據總量80%～90%的非結構化的存儲也成了現階段存儲創新的一片肥沃土壤。在這一相對較新的市場，中外廠商可以說是并駕齊驅，而中國天生的大數據環境，以及創新速度更快的應用場景，也為中國存儲廠商在非結構化存儲市場實現彎道超車提供了更多可能性和助力。另外從數據安全和合規性的角度考慮，只有掌握了存儲的核心技術，才能將發展的主動權牢牢握在自己手中，更好地為企業的數字化轉型保駕護航。
在存儲方面，青云科技始終緊繃的一根弦就是“全自研”。QingStor NeonSAN與QingStor U10000都是青云科技自主設計的，沒有繼承任何開源的架構，更不存在任何知識產權的風險。“自主研發使得我們在技術上實現了百分百可控，不存在技術盲區。”馮相東表示，“我們的存儲具備完整的處理任何復雜問題的能力，這是在踩過無數的‘坑’后沉淀下來的。如果是采用一些開源的方案，在經過十幾年的發展后，像Ceph這樣一個開源存儲項目代碼量累計已超過100萬行，整體架構變得復雜且冗余，在面對更深層次的存儲難題時就會捉襟見肘。”
青云科技為什么執著于走存儲自研的道路？青云科技擁有一顆“技術之心”，以不斷的技術創新滿足行業客戶的業務需求。當初，青云科技在評估其云計算平臺業務的時候，就做過非常嚴謹的技術評測。它并不是從一開始就在心理上排斥開源方案的，而是通過技術評測后發現，市面上當時確實沒有一款開源存儲方案能夠滿足通用大規模云計算平臺對存儲的全面需求。青云科技選擇走存儲自研這條路是經過深思熟慮的，經實踐證明也是可行和必要的。
無論是從企業可持續發展的角度，還是從情懷的角度，青云科技作為中國領先的云計算公司，懷揣著中國科技服務數字中國的愿景，希望通過自身的努力，徹底消除企業對數據安全的顧慮，以真正自研的中國存儲服務于數字中國建設。
當前，信創大潮洶涌澎湃，也給了青云科技更多底氣和動力。圍繞著存儲，青云科技進行了一系列國產化產品的適配，建立了包括從底層國產芯片、OS到上層PaaS、SaaS應用的信創生態。青云科技的存儲產品與鯤鵬、飛騰、海光等主流的國產硬件平臺，以及麒麟軟件、統信、openEuler等國產操作系統實現了生產化的兼容。
存得穩、算得快、管得好
最近，青云科技全面升級了其QingStor U10000產品，從它的演進和創新上，我們也讀懂了青云科技自研存儲的信念與力量。
此次全面升級后的QingStor U10000繼承了原來青云對象存儲、文件存儲的所有能力，同時在多個維度上實現了產品力的增強與迭代，致力于打造面向海量非結構化數據的統一存儲平臺，讓數據存得穩、算得快、管得好。
馮相東介紹說，QingStor U10000的提升主要表現在：實現了數據協議的互通、功能和性能的增強，以及與算力平臺對接的強化。
具體來看，作為面向海量非結構化數據的存儲平臺，QingStor U10000的基本立足點就是擁有支撐海量數據的存儲能力，并且保證卓越的性能。整個存儲集群能夠做到線性擴展，其中元數據與數據存儲服務都采用全分布式架構，從最小3節點起配，可橫向擴展至大規模數據存儲集群，所有節點規模增長的時候，可保證性能與容量的線性增長。特別值得一提的是，QingStor U10000在保證線性擴展和高性價比EC集群的基礎上，還能為通用場景，包括海量小文件場景提供卓越的I/O性能，單桶單目錄能支持百億級小文件存儲，并且能做到性能不衰減。這一特性能夠非常好地滿足AI場景的存儲需求。比如在AI訓練場景下，執行訓練任務的文件基本上都是小文件，大小通常在幾十KB到幾MB之間。這些小文件的形態主要包括圖片、音頻和視頻片段，雖然每個文件本身不大，但整個文件的量級非常大，一次訓練的量級可達幾億甚至十幾億。QingStor U10000針對包括 AI訓練這種典型場景在內的海量小文件場景，做了特別設計和優化，能夠提供卓越的I/O吞吐能力。
多協議無損互通，讓數據訪問和流通更高效
QingStor U10000多協議無損互通的特性，實現了高效的數據訪問與流通。比如，它采用統一的索引架構，并基于此提供了多種層次的能力，這樣一來，無需通過格式轉化就能讓從對象接口存進來的數據通過NFS進行訪問，或者NFS存進來的數據可以通過S3讀取。由于存儲和讀取數據，中間不需要經過格式轉化，也就不會有性能和語義的損失。另外，QingStor U10000還提供了多協議存儲接口，包括POSIX、SMB、NFS、FTP、HDFS、S3、SDK等，完全能夠滿足常見應用的需要。馮相東介紹說，QingStor U10000的協議互通能力讓數據分析更高效，這一點在自動駕駛、基因測序等新業務場景中表現得淋漓盡致。以自動駕駛場景為例，一輛路測車產生的數據要通過四個環節的處理，才能發揮其真正的作用。第一個環節，數據的上傳和導入會用到S3和NFS協議；第二個環節數據預處理，基本以HDFS大數據分析框架為主；第三個環節AI訓練則以NFS協議為主；第四個環節仿真測試主要以NFS和SMB協議為主。由此可見，一份數據在不同階段，需要通過不同的數據訪問協議對接不同的計算框架，只有協議互通才能讓數據分析更加高效，而這正是QingStor U10000能夠從容應對新負載的一大亮點。
“QingStor是更懂算力的存儲平臺。”馮相東如是說。QingStor U10000證明了這一點，因為它的一大優勢就是與算力的無縫對接。QingStor U10000具備豐富的數據處理功能，能夠提供一系列完善的API、SDK，輕松對接大數據平臺、數據處理的框架與服務，實現數據和算力的高效結合。在實踐中，無論是圖片處理、音視頻轉碼，還是AI大數據分析、HPC超算平臺，QingStor U10000都有一整套完善的機制與之對接，點數成金。
對于存儲而言，數據的安全是底線。QingStor U10000在這方面表現如何呢？第一，它采用了元數據和存儲數據的分層設計，在數據層面提供了副本和多副本策略，并且有自校驗機制和增量修復機制，確保了數據安全；第二，它采用多重訪問安全機制，比如多租戶訪問隔離，基于用戶、資源、訪問行為或者訪問IP的安全訪問機制，以及存儲產品本身所具有的版本管理、WORM、日志歸檔等高級存儲特性，充分滿足數據安全合規性要求；第三，它具有智能預警機制，可以對所有資源進行智能監控，在硬盤、網卡、存儲節點等出現故障時提前預警；第四，它提供了強大的運維監控平臺，實現了資源管理、配置管理、告警、日志、監控等一系列安全操作。
就像它的名字一樣，在非結構化存儲市場上，青云科技QingStor U10000可謂“萬里挑一”，它不僅秉承創新的理念與架構，更具有滿足企業級客戶需求的強大功能與安全合規性，而且在面對自動駕駛、AI、HPC、物聯網等新應用、新負載時，表現得游刃有余。青云存儲以全自研的魄力和能力，引領了非結構化存儲未來的發展。
