近期,DataPipeline收到一封來自山東省城市商業銀行合作聯盟有限公司(以下簡稱:山東城商行聯盟)的感謝信。客戶對DataPipeline全力以赴、恪盡職守的工作態度及做出的積極貢獻給予高度肯定和感謝,并對后續工作提出了殷切期望。收到這封信,相關項目組成員都備受鼓舞。
信里這樣寫到:
“貴司按照聯盟項目要求,積極響應、主動工作、密切配合,順利完成了2021年項目計劃工作,確保了聯盟金融云數據中心建設項目工作的平穩順利推進。在此期間,貴司委派參加聯盟項目實施工作的王鑫同志,嚴格執行聯盟項目工作的各項計劃和要求,認真負責、恪盡職守、不辭辛苦,為保障工作的順利完成做出了積極的貢獻。
在此,對貴司給予聯盟金融云數據中心建設項目的高度重視和全力以赴表示衷心感謝,并希望貴司按照項目工作計劃和要求再接再厲,為聯盟金融云數據中心建設及遷移項目的開展繼續提供有力支持。”
業務當先理念契合，擁抱實時數據管理
早在2020年,山東城商行聯盟就開啟了與DataPipeline的合作之路。
山東城商行聯盟經原中國銀監會批準成立,是目前全國唯一持有金融牌照的中小銀行金融科技服務公司。公司為各成員行提供集核心業務系統、互聯網金融系統、外聯業務平臺、大數據服務及運營、風控支持等全方位的信息科技解決方案以及培訓、咨詢、合作創新等多元服務,引領成員行通過科技創新推動業務發展和轉型升級,是山東省大數據重點骨干企業。公司致力于打造賦能中小銀行、開放共享的金融科技生態平臺。
在云計算、大數據、人工智能快速發展背景下,金融行業適應客戶需要的多樣化和個性化場景不斷涌現。經過10多年的電子化發展、信息化建設,山東城商行聯盟積累了海量的數據,如何利用好這些數據成為了聯盟應對新形勢挑戰、謀求轉型發展的重要課題。相對于大型商業銀行,降低運營成本、提升客戶體驗、提高營銷能力等轉型工作對于以山東城商行聯盟為代表的的城市商業銀行在科技創新發展上更為關鍵。
隨著數據應用的深入,成員行業務部門不斷提出更復雜的實時數據加工需求,新需求的加工復雜度持續升高、使用場景持續擴展、交付效率持續加快、運營質量要求持續提升。為提升實時數據支撐能力,山東城商行聯盟開始啟動實時數據體系建設,在不影響核心業務的情況下,將核心業務的數據準實時進行數據分發,全面推動“業務監測與風險預警、智慧APP6.0、智慧營銷平臺”等業務的能力。
山東城商行聯盟通過產品調研、可行性分析、POC驗證,選擇DataPipeline數見科技作為合作伙伴共同完成數據庫實時數據采集系統項目的實施。該方案三大核心能力與聯盟實時數據管理體系整體策略高度契合:
01 多元異構
Oracle、IBM DB2、MySQL、Kafka等多種數據庫進行近實時的數據采集功能,并對數據源建立高效的管理功能,實現對數據源、目的地的數據連接統一管理管理,通過界面進行數據源與目的地注冊,刪除數據源,同時根據需求不斷迭代支持新的數據庫。
02 實時同步
利用解析數據庫歸檔日志的方式,實現秒級的數據變更捕獲,將解析的變更記錄傳送到數據目的地中,包括日志中提取數據變更的增、刪、改等DML操作記錄,以及新增表、刪除表、添加字段、刪除字段等自動同步到目的地中。
03 標準管理
統一的可視化管理頁面,提供平臺級別的數據管理功能,包括產品權限、數據時效管理和安全管控等方面功能,為數據工程師、運維人員提供直觀的數據任務地圖,隨時可以洞悉數據的最新動態,極大提升運維工作效率和效益。
精誠協作順利上線，構建堅實底座
項目現場
自系統建設啟動以來,多研發測試任務齊頭并進,山東城商行聯盟生產運維部及DataPipeline項目組全體成員高度重視、上下一心通力協作,順利完成上線測試。針對割接方案,項目組成員進行多輪評審,精心準備、考慮周全,最終確保割接工作準確有序進行,數據及業務系統萬無一失,項目圓滿完成。該系統已于2021年正式投入使用。
山東省城商行聯盟核心運維組技術專家倪俊甜在DataPipeline2021數據管理與創新大會的演講中表示:
“DataPipeline助力山東省城商行聯盟構建的企業級數據庫準實時數據采集系統對于推動其實現數字化轉型、數據規范化和集約化管理、賦能企業經營及增強其持久核心競爭力具有重要意義。DataPipeline可實現數據的秒級實時采集,產品具備統一易用的人性化操作界面,豐富的配置策略可實現對資源的高效充分利用,產品同時具有標準化遵循與前瞻性判斷前提下的開放可擴展性,當然最重要的是其金融級的穩定高容錯能力。”
全域數據實時融合的價值愈發重要,是加速數據流通、從而提升經營效率構建差異性競爭優勢的重要手段。該項目平臺實現各系統的打通與關聯,覆蓋多層次客戶服務體系,強化了線上業務服務和資產配置等綜合實力。該項目的實施提升了成員行的獲客能力和精準個性化服務水平,助力成員行運營與管理數智化再升級。同時,簡單易用的數據同步機制可以降低應對各種實時數據應用場景的成本,提高數據的復用度,高效釋放數據價值。
因此,同年12月,「DataPipeline助力山東城商行聯盟構建企業級數據庫準實時數據采集系統」案例成功入選由中國信息協會發布的“2021中國大數據應用樣板100例”,獲得來自多方的好評,起到行業示范引領效應。
在該項目后續階段,DataPipeline也將會繼續發揮產品技術與服務優勢,以高水平、高要求的標準完成接下來的工作任務。
“客戶成功”是DataPipeline企業文化理念中的重點。DataPipeline向所有信任和支持公司的客戶表示衷心感謝,同時也向身體力行地踐行著公司愿景與使命的DataPipeline人致以敬意。未來,DataPipeline將充分發揮在實時數據管理領域的領先優勢,持續深耕金融等行業,推動產業高質量發展。
