導讀:麥聰軟件基于DaaS(數據即服務)平臺幫助企業構建下一代數據中臺。
2014年,馬云從芬蘭一家游戲公司Supercell接觸到中臺概念后,在阿里內部積極踐行,開創了“大中臺、小前臺”的組織機制和業務機制。
阿里數據中臺的理念是通過高效、統一的后方系統來支撐快速變化的前端業務,提高業務產出效率,減少成本投入。
·2015年阿里啟動中臺戰略,同年數據中臺概念開始深入互聯網公司
·2016年數據中臺概念大火
·2018 年因為“騰訊數據中臺論”再度成為了人們談論的焦點
·2020年,阿里卻提出要拆中臺。
數據中臺,仿佛一夜之間墜落神壇。
峰回路轉,2022年阿里又提出DaaS,讓數據中臺的故事繼續中... ...
一、什么是數據中臺?
回答什么是數據中臺之前,我們先說說什么不是數據中臺。
數據中臺不是大數據平臺!因為它首先就不是一個平臺,也不是一個系統。
如果有廠商說他們有個數據中臺(Hadoop開源版+PostgreSQL系列MPP+開源拼湊一體化開發和管理平臺),馬上打110報警,因為它很可能是個騙子。
接著,我們來探討一下數據中臺到底是什么?
數據中臺是一種十足技術術語。雖然沒有明確的定義,但是從字面的理解和技術基礎的分類,我們可以先把中臺看作是一種中間層。
既然是一種中間層,那么從內容理解上應該是中間件,而不是數據庫或大數據平臺類的數據存儲和處理產品。
借助Gartner的架構層來理解為什么要有中間層,可以更好地理解中臺的定位和價值。以下是Gartner按照事物變化的速度來分層,這樣可以逐層分析并設計合理的邊界與服務。
圖:Gartner 解釋為什么要有中間層
在數據開發中,核心數據結構的變化是相對緩慢的,但它對數據業務的影響卻非常大,是業務應用的基礎單元;但業務創新的速度、對數據提出的需求變化是非常快速的。
二、數據中臺能解決什么問題?
數據中臺的出現,彌補了數據開發和應用開發之間,由于開發速度不匹配而出現的響應速度跟不上的問題。
簡單的理解就是應用開發和數據開發之間可以解耦,應用開發只需關心自己的業務,不用關心數據在什么地方、如何存儲,如何訪問等。數據中臺的出現,讓應用開發人員和數據開發人員各司其職,以標準的服務完成雙方的互信和訪問。
數據中臺主要解決以下三類問題:
1. 開發效率低:一般情況下,應用開發人員開發一個數據查詢需要很長的時間。因為除了要他們除了要理解業務相關需求,同時還需要理解底層的數據模型是什么樣的、如何開發、如何調用等問題。
或者需要另找相關的數據開發人員來幫自己開發所需要的數據接口。無論是自研還是外包,中間的理解成本和溝通成本都會嚴重影響數據業務上線的效率和質量。
2. 重復造輪子:當一個新的業務應用需要開發時,雖然和別的項目需求大致差不多,但因為是別的項目組維護的,所以數據還是要自己再開發一遍,也就我們常說的“重復造輪子”——即把從開發、測試、上線的工作重復再做一次,最終的結果取決于開發人員是什么水平和責任心。
3. 專業的人做專業的事:數據的處理和維護是一個相對專業的技術工作,需要相當專業的人來完成。但很多時候,應用開發人員對少量數據開發人員,項目需要做什么就直接抽人來做,不管這個人是否專業。
以上這三類問題都會導致應用開發團隊效率下降。這就是數據中臺的關鍵——讓前臺開發團隊的開發速度不受后臺數據開發的影響。
Thoughtworks專家認為,數據中臺是聚合和治理跨域數據,將數據抽象封裝成服務,提供給前臺以業務價值的邏輯概念。具體如下圖所示:
圖:Thoughtworks的數據中臺概念
Data API是數據中臺的核心,它是連接前臺和后臺的橋梁。通過API的方式提供數據服務,而不是直接把數據庫給前臺,讓前臺開發自行使用數據。
至于產生Data API的過程,怎么樣讓Data API產生得更快?怎么樣讓Data API更加清晰?怎么樣讓Data API 的數據質量更好?這些都是需要圍繞數據中臺去構建的能力。
也就是說,Data API本質上就是DaaS的基礎。正是看到了Data API的價值,全球領先的麥聰DaaS平臺,在Data API創建、發布和全生命周期的管理都讓客戶擁有極致的體驗。
圖:麥聰DaaS平臺產品架構圖:Data API是DaaS的基礎
不管是數據開發人員還是業務人員,都可以在幾分鐘內創建1個Data API以及發布、分享、調用等全生命周期管理。并且,麥聰DaaS平臺的數據探查功能,可以幫助客戶自查數據質量。
三、為什么說數據中臺興于DaaS?
雖然阿里提出數據中臺的概念沒能得到市場的全盤接受,但是中臺里的一個理念卻被廣泛認可,即One Service(統一數據服務)。
統一數據服務的中心思想是,數據部集中設計和開發API服務,讓數據使用只復用不復制,以真實訪問和接入需求的數據服務提供給數據使用者,目的是為企業提供一個統一的數據接入和數據查詢服務。
這一理念也到了國內外DaaS(數據即服務)公司的一致認可,尤其得到Snowflake、麥聰軟件這類DaaS公司的持續推進和發展。
眾所周知,DaaS并非一個全新的概念,在中國已有近十年的發展。從本質上看,DaaS架構在企業已有大數據平臺(數據湖)或數據倉庫的基礎上,能夠幫助企業快速構建數據服務化的中間件,更符合市場對下一代數據中臺的理解。
因此,DaaS已經被很多行業人士寄予厚望,成為企業下一代數據中臺的方向和目標。甚至,在2022年的年中,阿里重整原來數據中臺等技術團隊也提出DaaS概念,這無疑讓DaaS成為下一代數據中臺的未來趨勢更加篤定。
目前來看,DaaS能夠給企業帶來哪些價值:
· DaaS從0到1,比較容易產生新的價值點
· DaaS本身是面向應用或業務用戶的,更容易受企業認可
· DaaS通過配置或SQL的方式其實就是無代碼的方式生成Data API,更容易讓企業獲得成功
圖:麥聰DaaS平臺幫助企業快速構建下一代數據中臺
企業只有把數據用起來了,才能反向推動數據治理和數據標準類似的工作,而數據治理的推進也會讓數據服務化更好,讓業務更好的使用數據,這其實也是企業數字化轉型的方向和重要目標:讓數據用起來。
關于麥聰軟件:
全球領先的DaaS(數據即服務)軟件廠商,支持元數據管理,數據治理,數據開發,數據服務化,數據市場等功能,幫助企業快速構建下一代數據中臺,加速企業數字化轉型的進程。目前,500強客戶中已有30多家選擇麥聰DaaS平臺。