9月23日,2022網(wǎng)易數(shù)字+大會在杭州盛大召開,網(wǎng)易數(shù)帆在大會現(xiàn)場首發(fā)數(shù)據(jù)生產(chǎn)力模型,并基于此帶來在大數(shù)據(jù)領(lǐng)域的最新成果發(fā)布,通過重塑企業(yè)數(shù)智生產(chǎn)力,幫助企業(yè)實(shí)現(xiàn)數(shù)據(jù)生產(chǎn)力的躍遷。
網(wǎng)易數(shù)帆大數(shù)據(jù)產(chǎn)品線總經(jīng)理余利華表示,面對數(shù)字化時代下的機(jī)遇與挑戰(zhàn),網(wǎng)易數(shù)帆沉著應(yīng)對,憑借過硬的技術(shù)實(shí)力和豐富的實(shí)踐經(jīng)驗(yàn),從大數(shù)據(jù)底座、數(shù)據(jù)中臺、數(shù)據(jù)治理,再到數(shù)據(jù)資產(chǎn)的沉淀,精心打磨各個數(shù)字化階段的產(chǎn)品與服務(wù),助力客戶打造“人人用數(shù)據(jù),時時用數(shù)據(jù)”的數(shù)據(jù)文化氛圍,進(jìn)一步釋放數(shù)據(jù)生產(chǎn)力。
網(wǎng)易數(shù)帆大數(shù)據(jù)產(chǎn)品線總經(jīng)理余利華
首發(fā)數(shù)據(jù)生產(chǎn)力模型,推動企業(yè)提質(zhì)增效
基于十多年內(nèi)外部數(shù)字化轉(zhuǎn)型實(shí)踐,網(wǎng)易數(shù)帆可提供前沿的、高性能的大數(shù)據(jù)技術(shù)工具和平臺來支撐企業(yè)的數(shù)據(jù)應(yīng)用。大會現(xiàn)場首發(fā)“數(shù)據(jù)生產(chǎn)力模型”,通過數(shù)字化實(shí)踐經(jīng)驗(yàn)?zāi)P椭ζ髽I(yè)數(shù)字化轉(zhuǎn)型目標(biāo)達(dá)成,為企業(yè)實(shí)現(xiàn)提質(zhì)增效。
模型定義為充分利用大數(shù)據(jù)相關(guān)技術(shù), 協(xié)助行業(yè)客戶沉淀數(shù)據(jù)資產(chǎn), 探索在業(yè)務(wù)場景中的數(shù)據(jù)應(yīng)用價值, 并通過數(shù)據(jù)運(yùn)營發(fā)揮長期效用。模型包含DataOps、DataFusion、DataProduct三大內(nèi)核和數(shù)據(jù)技術(shù)、數(shù)據(jù)資產(chǎn)、數(shù)據(jù)應(yīng)用、數(shù)據(jù)運(yùn)營四要素,聚焦金融、制造、醫(yī)藥、流通等行業(yè)。從業(yè)務(wù)場景中挖掘數(shù)據(jù)價值,進(jìn)一步釋放企業(yè)數(shù)據(jù)生產(chǎn)力。
夯實(shí)先進(jìn)大數(shù)據(jù)技術(shù),進(jìn)一步完善DataOps能力
隨著數(shù)字化進(jìn)程加速,當(dāng)前企業(yè)大數(shù)據(jù)基礎(chǔ)設(shè)施的發(fā)展也面臨信創(chuàng)加速、架構(gòu)解耦、云原生化、流式湖倉的建設(shè)等種種挑戰(zhàn)。為了應(yīng)對數(shù)字化潛在風(fēng)險,網(wǎng)易數(shù)帆不斷升級優(yōu)化產(chǎn)品功能與技術(shù),進(jìn)一步完善DataOps能力。
作為網(wǎng)易數(shù)帆數(shù)據(jù)生產(chǎn)力模型三大重要內(nèi)核之一, DataOps是一種將軟件工程CI/CD的方法融入數(shù)據(jù)開發(fā)的流程,基于自動化的數(shù)據(jù)測試、任務(wù)發(fā)布等技術(shù),構(gòu)建數(shù)據(jù)發(fā)布流水線,使得數(shù)據(jù)開發(fā)效率更高、交付更加頻繁,交付質(zhì)量更有保障。
網(wǎng)易數(shù)帆在DataOps實(shí)踐中發(fā)現(xiàn)了一系列發(fā)布審核的問題,如任務(wù)發(fā)布時資源遺漏,多集群、多環(huán)境任務(wù)發(fā)布難題等。
為此,網(wǎng)易數(shù)帆發(fā)布了全新的任務(wù)發(fā)布中心,進(jìn)一步完善了網(wǎng)易數(shù)帆DataOps產(chǎn)品體系。在實(shí)際應(yīng)用中,有諸多金融券商客戶,對數(shù)據(jù)開發(fā)有著嚴(yán)格的監(jiān)管要求,需要有如測試、預(yù)發(fā)、生產(chǎn)等多套環(huán)境來保障數(shù)據(jù)的隔離和安全。而現(xiàn)有平臺雖然支持部署多套,但是無法進(jìn)行高效的任務(wù)發(fā)布,只能通過人工方式進(jìn)行重復(fù)的創(chuàng)建、開發(fā)、上線等操作,成本高且極易出問題。客戶亟需高效、安全的產(chǎn)品能力來支持這類繁重的工作。
任務(wù)發(fā)布中心支持跨集群的資源發(fā)布能力,支持資源的批量導(dǎo)出和導(dǎo)入功能,可實(shí)現(xiàn)網(wǎng)絡(luò)隔離場景下的跨集群發(fā)布。
本次大會還有一個重要環(huán)節(jié),《從數(shù)據(jù)中臺到數(shù)據(jù)生產(chǎn)力 ——網(wǎng)易數(shù)據(jù)建設(shè)實(shí)踐》新書首發(fā)。這也是網(wǎng)易數(shù)帆大數(shù)據(jù)團(tuán)隊(duì)總結(jié)經(jīng)驗(yàn)、沉淀技術(shù)的匠心之作,希望啟發(fā)更多企業(yè)探索出符合自身特色的數(shù)字化之路。
開發(fā)治理一體化,全方位沉淀企業(yè)數(shù)據(jù)資產(chǎn)
在數(shù)字經(jīng)濟(jì)時代下,數(shù)據(jù)日益成為重要戰(zhàn)略資源和生產(chǎn)要素。因此,企業(yè)紛紛在數(shù)字化轉(zhuǎn)型過程中開始構(gòu)建大數(shù)據(jù)相關(guān)的技術(shù)平臺,而在此過程中暴露出了一些問題,如:數(shù)據(jù)開發(fā)與數(shù)據(jù)治理脫節(jié)、缺少對不同平臺的統(tǒng)一管理、數(shù)據(jù)開發(fā)過程中效率和質(zhì)量無法兼顧、煙囪式的數(shù)據(jù)開發(fā)、對數(shù)據(jù)價值和成本的評估不足等。
為了解決此問題,網(wǎng)易數(shù)帆將傳統(tǒng)數(shù)據(jù)治理的方法融入數(shù)據(jù)開發(fā)的全生命周期中,基于DataOps全生命周期數(shù)據(jù)開發(fā)底座,采用數(shù)據(jù)中臺架構(gòu),結(jié)合網(wǎng)易特色的基于ROI的數(shù)據(jù)資產(chǎn)化實(shí)踐,形成了數(shù)據(jù)治理2.0的方法論。
該方法論的核心內(nèi)涵為“數(shù)據(jù)開發(fā)和數(shù)據(jù)治理一體化”理念,即“先設(shè)計(jì)后開發(fā)”,可以理解為一邊開發(fā),一邊治理,其目標(biāo)就是將數(shù)據(jù)標(biāo)準(zhǔn)定義、指標(biāo)規(guī)范定義、模型設(shè)計(jì)和數(shù)據(jù)開發(fā)體系連接在一起,以設(shè)計(jì)驅(qū)動開發(fā),在開發(fā)的過程中保障數(shù)據(jù)標(biāo)準(zhǔn),數(shù)據(jù)質(zhì)量,數(shù)據(jù)安全的落地,以達(dá)到“事半功倍”的治理效果。
網(wǎng)易數(shù)帆的數(shù)據(jù)治理體系,既包括傳統(tǒng)數(shù)據(jù)治理的三大件:數(shù)據(jù)質(zhì)量、元數(shù)據(jù)管理、數(shù)據(jù)標(biāo)準(zhǔn),還包括了數(shù)據(jù)中臺的相關(guān)系統(tǒng),例如指標(biāo)系統(tǒng)、模型設(shè)計(jì)中心和數(shù)據(jù)服務(wù)等。通過實(shí)現(xiàn)數(shù)據(jù)治理體系升級,將數(shù)據(jù)治理的流程自然融入數(shù)據(jù)開發(fā)的全生命周期過程中,在數(shù)據(jù)開發(fā)的過程中,就完成數(shù)據(jù)治理。通過指標(biāo)和數(shù)據(jù)標(biāo)準(zhǔn)的定義實(shí)現(xiàn)“規(guī)范即設(shè)計(jì),設(shè)計(jì)即開發(fā),開發(fā)即治理”,讓數(shù)據(jù)“找得到,看得懂,信得過”,進(jìn)而為企業(yè)提供及時、準(zhǔn)確、復(fù)用、有價值的數(shù)據(jù)資產(chǎn)。
在數(shù)據(jù)治理領(lǐng)域,網(wǎng)易數(shù)帆也取得了不俗成績。有數(shù)數(shù)據(jù)治理平臺榮獲2022CCF大數(shù)據(jù)與計(jì)算智能大賽“優(yōu)秀案例獎”、2021-2022大數(shù)據(jù)產(chǎn)業(yè)優(yōu)秀產(chǎn)品獎等諸多獎項(xiàng)。 并在東北證券、德邦快遞等多位行業(yè)客戶實(shí)踐落地。
“未來,網(wǎng)易數(shù)帆會持續(xù)做好數(shù)據(jù)治理,打磨全鏈路大數(shù)據(jù)產(chǎn)品和技術(shù)能力,充分激活數(shù)據(jù)生產(chǎn)要素的活力,將企業(yè)的數(shù)據(jù)價值與業(yè)務(wù)變現(xiàn)相結(jié)合,并最終沉淀為企業(yè)數(shù)據(jù)資產(chǎn),助力各個行業(yè)企業(yè)數(shù)字化轉(zhuǎn)型發(fā)展”,余利華說。