6月8日,以“山容海納,云安未來”為主題的2022中國電子云創新產品發布會在線上召開。會上,中國電子云大數據產品總監張占峰發布了中國電子云大數據產品家族CeaInsight。
張占峰表示,截止到現在大數據產品經歷三個階段的演進歷程:
從2000s年代起進入了第一個十年,1.0階段是在不同分析業務場景下,用不同技術如基于Share-Nothing無共享模式并行計算的mpp技術和基于Hadoop體系的大數據技術,分別封裝成不同產品,如數倉和大數據平臺,完成TP級結構化數據和PB級非結構化數據的匯聚和分析。
從2010s年代,大數據進入了2.0時代——云時代,基于云基礎設施Infrastructure,統一部署,但業務依然是分群的,給客戶搭建的湖倉平臺也依然是分離的架構。
從2020s年代開始,大數據進入了3.0時代,基于云原生技術,核心要素是容器化輕量化部署、存儲和計算的分離、極致和可靠的按需彈性擴展,為政企數字化轉型提供一站式數據平臺解決方案。
中國電子云大數據產品家族CeaInsight原生于大數據3.0時代,基于云原生大數據的創新技術,全面兼容和適配全國產化基礎設施,可幫助用戶彈性構建出“計算可信、存儲可靠、內生安全”的數字底座基礎設施。產品包括可獨立部署的、多版本交付的、企業級大數據平臺軟件及云服務。
中國電子云發布一攬子大數據產品
據張占峰介紹,中國電子云大數據產品家族CeaInsight涵蓋一個大數據基礎平臺軟件及五個大數據云服務套件。分別是基于Hadoop的企業級大數據平臺管理軟件的CDP和數據湖探索服務CDL;云搜索引擎服務CSE;日志分析服務CLS;數倉MPP服務以及數據分析服務CDA服務:
大數據基礎平臺Cloud Data Platform(CDP)面向行業客戶,豐富、差異的業務場景,通過中國電子云的一云多芯能力兼容適配多種CPU架構,并靈活部署在虛擬機、物理機及容器等和各類基礎設施資源之上。輕量化、靈活的大數據平臺部署模式,可讓用戶應用放心、運維省心、操作方便、管理簡單。整體上具備先進、安全、綠色的平臺級核心優勢。
數據湖探索服務 Cloud DataLake(CDL)是基于云原生技術架構,搭建的數據湖倉一體化平臺,包括統一的數據湖級的存儲,統一的元數據管理,及統一的數據湖計算。該產品具備元數據驅動、全生命周期管理、全域全鏈路數據安全等核心能力,擁有原生安全、湖倉一體、存算一體、多模計算、敏捷全棧等能力和核心特點
云搜索服務Cloud Search Engine(CSE)是面向有海量日志及文檔數據的全文檢索需求打造的服務,提供了基于Elasticsearch的低成本、場景化的企業級搜索引擎,具備快速部署、彈性伸縮和智能運維等核心能力;
日志服務Cloud Log Service(CLS)提供全量日志的批量采集、分級存儲、高效檢索,及可視化分析和實時告警等核心功能。通過日志服務可整體提高運維和運營效率,滿足云平臺及云產品運維人員的日志審計、運維分析等場景需求,具有多源異構采集、安全高密度存儲、查詢和分析、匯聚轉換和加載、查詢和分析等能力,為用戶提供功能全面、快速接入、彈性擴展、安全可靠、性能強勁的端到端服務。
云數據倉庫MPP服務,則是面向云上租戶,提供的云數倉集群托管服務,基于容器化部署Share-Nothing架構集群的數據庫實例,給各租戶提供結構化數據的實時查詢和分析服務。支持PG和MySQL等主流開源協議,因為是開放的平臺服務,生態上中國電子云同時兼顧商業MPP廠商的實例托管,及產品許可、和統一的運維服務。
中國電子云數據分析服務Cloud Data Analytics(CDA),則是根據用戶跨組件跨庫的數據分析和商業洞察需求,基于云原生分布式查詢技術,打造的服務能力。存儲支持,對象、Hadoop文件、MPP、ES等多種異構數據資源。面向有數據模型和數據產品敏捷開發需求的高階客戶,提供在線的交互式分析服務能力。
在整體性能上,中國電子云CeaInsight面對100PB的超大規模數據集的過濾查詢場景,在保證副本可靠的前提下,可提供百臺高密度的存儲集群、實現秒級響應的極致性能。而除了客戶業務數據,在大數據中心平臺側的元數據集群,可以支持數十萬的表規模及數十萬的數據分區規模,保障客戶數據業務的敏捷高效。
“此外,各類計算引擎分別提供特定業務場景下的極致性能,無論批流計算、還是湖倉構建,從ES全文檢索庫到K-V鍵值存儲庫,交互式分析能力將無處不在。自主創新的大數據技術,加上安全可靠的存儲,共同造就了中國電子云大數據平臺的極致性能。”張占峰介紹到。
深耕行業,為用戶提供“定制化”行業解決方案
不僅如此,會上張占峰還發布了大數據產品整體解決方案,他表示:面向數字政府、數字經濟、數字產業等全域現代數字城市業務場景,基于中國電子云大數據產品能力體系,我們將跟合作伙伴一起構建各個行業的大數據整體解決方案,通過中國電子云全面整合交付,構筑“可集成、可服務、可升級、可信任”的整體解決方案。
在最后,張占峰表示,未來大數據產品將會隨著AI等技術的發展變得更加智能、安全以及綠色。未來,中國電子云將持續投入科技創新,與客戶和伙伴,一起攜手踏入大數據云技術的新天地、探索新山海、共筑安全數字底座。