3月30日,2021(第七屆)中國國際大數據大會在北京成功召開。500多位大數據行業嘉賓齊聚一堂,圍繞“數字筑基 智見未來”主題,研討數字經濟時代,數字轉型的難點與路徑;共探“十四五”時期,大數據發展趨勢與新機遇!
華為云中國區副總裁胡維琦受邀出席大會并發表 “開發數據商業價值,助力政企數據資產化”主題演講。同時,華為云數據使能DAYU服務中的FusionInsight MRS云原生數據湖、Data Lake Insight DLI數據湖探索分別榮獲“2020年度大數據行業優秀解決方案”獎、 “2020年度大數據行業創新產品”獎,這是業界對華為在大數據領域持續技術創新、實踐應用等方面成績的再度肯定。
圖 華為云獲2020年度大數據行業獎項
開發數據商業價值,助力政企數據資產化
華為云中國區副總裁胡維琦女士在大會主題演講中提到,“數據發展重心逐步從關鍵技術向生產要素演進,在這個過程中,數據資產化并安全流通是商業新機遇。華為云數據使能DAYU服務,助力政企加速把數據資源加工為數據資產,讓數據像清潔的水電一樣為政企使用,為數據成為整個社會的生產要素打下堅實的基礎。”
圖 華為云中國區副總裁胡維琦做主題發言
在工業大數據論壇中,華為云專家表示,“工業數字化轉型已是全球共識。從我們的實踐看來,工業數字化轉型的關鍵在于打通信息物理系統,構筑IT和OT數據融合的工業互聯網平臺,用AI加持,逐步使能智能制造再升級。“
華為云FusionInsight MRS云原生數據湖斬獲“大數據行業優秀解決方案獎”
華為云FusionInsight MRS云原生數據湖,一個架構可持續演進,構建離線、實時、邏輯三種數據湖,助力客戶釋放海量數據價值,讓業務洞見更準,價值兌現更快。
l 離線數據湖:HetuEngine提供秒級交互式查詢能力,數據不出湖,分析鏈路短,性能比Impala快30%+,分析提效10倍+;DLC提供統一的元數據,數據全局可視; HetuEngine提供湖內統一SQL接口:HDFS、Hive、HBase、ES等,簡化用數。
l 實時數據湖:流處理 + Hudi實現數據增量更新入湖,從T+1到T+0; ClickHouse提供毫秒級實時OLAP分析能力;Flink提供FlinkSQL能力,批流SQL接口統一,實現流批一體。
l 邏輯數據湖:HetuEngine提供跨湖、跨倉、跨云統一訪問,減少數據搬遷,數據高效流動,全域數據秒級協同分析秒級響應,業務上線效率提升10倍,由“周級”縮短至“天級”。
華為云DLI數據湖探索斬獲“大數據行業創新產品獎”
華為云數據湖探索(Data Lake Insight,簡稱DLI)是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Presto)生態,提供一站式的流處理、批處理、交互式分析的Serverless融合處理分析服務。 企業使用標準SQL、Spark、Flink程序就可輕松完成多數據源的聯合計算分析,挖掘和探索數據價值。
1) 融合數據湖:一站式的實時分析、離線分析、交互式分析的Serverless融合處理分析服務
• 實時分析:Flink提供FlinkSQL能力,批流SQL接口統一,實現流批一體。
• 離線分析:深度優化的Spark內核,在TPC-DS標準套場景下性能比開源版本快50%+。
• 交互式分析: openLooKeng提供秒級交互式查詢能力,性能比Impala快30%+。
2) 容器加持:基于Kubernetes的容器管理技術,滿足用戶擴縮容和AI分析需求
• 自動擴縮容:根據業務負載,對計算資源進行預估和自動擴縮容。
• 自定義鏡像:支持運行Kubernetes生態的用戶自定義鏡像,便于用戶快速構建基于行業庫的數據分析能力。
3) 跨源分析:支持跨源統一訪問,數據虛擬入湖,邏輯統一訪問,免數據搬遷
• 跨源訪問: 支持多種數據格式,云上多種數據源、ECS自建數據庫以及線下數據庫,數據無需搬遷,即可實現對云上多個數據源進行分析,構建企業的統一視圖,幫助企業快速完成業務創新和數據價值探索
• 算子下推:將算子下推到數據源進行計算獲取到更好的性能,減少跨源分析時經過網絡的數據量