日日操夜夜添-日日操影院-日日草夜夜操-日日干干-精品一区二区三区波多野结衣-精品一区二区三区高清免费不卡

公告:魔扣目錄網為廣大站長提供免費收錄網站服務,提交前請做好本站友鏈:【 網站目錄:http://www.ylptlb.cn 】, 免友鏈快審服務(50元/站),

點擊這里在線咨詢客服
新站提交
  • 網站:51998
  • 待審:31
  • 小程序:12
  • 文章:1030137
  • 會員:747

在數倉及中臺研發過程中,研發人員經常需要在不同任務中維護相同或類似代碼,不僅費時費力,并且代碼迭代后也面臨不同業務單元邏輯性不一致的問題,對運維管理形成挑戰。

一般來說,研發人員往往通過代碼模板來解決這一問題。具體而言,在核心數據處理邏輯相同的情況下,研發人員通過代碼模版傳入不同的任務參數,解決核心數據處理邏輯復用的問題,使得后續任務可以批量化,滿足實時調用需求。

目前,任務模板已是火山引擎DataLeap研發治理能力之一,主要用于管理常用的任務邏輯,以此降低常用代碼的運維成本。在產品功能上,DataLeap任務模板支持豐富的引擎能力,包括LAS/EMR HSQL 、LAS/EMR Java Flink、LAS/EMR Flink SQL、shell任務,滿足離線實時任務的不同需求。此外,DataLeap還支持歷史版本管理,即保存或更新模板后,記錄各個版本更新情況,方便查看代碼設置及參數。

在使用層面上,研發人員只需要三步驟即可完成任務模板創建,便捷復用核心數據處理邏輯。

第一步:選中支持的任務類型

· 在模板列表右側的“+”(更多)按鈕中,新建子目錄或新建任務模板。

· 在新建任務模板窗口中,輸入以下參數,并新建模板。

圖片 1.png

第二步:代碼編寫參數設置

· 在任務模板的代碼開發編輯界面,通過 DDL 和 DML 編寫通用 SQL。

· 表名、字段名分別可以用參數表示,以下以 LAS Flink SQL的邏輯處理,保存為test02模板。

圖片 2.png

第三步:在任務開發中引用

研發人員可以通過以下2種方式引用test02模板:

· 方法1:在模板列表中,選擇模板并點擊后即可快速引用。

· 方法2:在代碼編輯界面右上角選擇任務模板,選擇模板后,按需選擇是否最新版本的模板,在對參數設置之后,預覽代碼最終生成效果(如圖)。

圖片 3.png

火山引擎DataLeap任務模板能力可應用于以下場景:

· 場景1:將預先設計好的離線、實時任務模板保存后,即可在多個任務中引用此類型模板,快速實現代碼復用。

· 場景2:將shell任務代碼制作為前置判斷條件,在數據分析前的觸發檢測運行條件是否滿足。

除了任務模板之外,作為大數據研發治理套件,火山引擎DataLeap還可以提供數據集成、開發、運維、治理、資產、安全等能力,幫助用戶提升數據研發效率、降低管理成本,加速推動企業的數字化轉型。(作者:陸海)


分享到:
標簽:火山引擎DataLeap引入任務模板 助力數據研發提效 熱點資訊
用戶無頭像

網友整理

注冊時間:

網站:5 個   小程序:0 個  文章:12 篇

  • 51998

    網站

  • 12

    小程序

  • 1030137

    文章

  • 747

    會員

趕快注冊賬號,推廣您的網站吧!
最新入駐小程序

數獨大挑戰2018-06-03

數獨一種數學游戲,玩家需要根據9

答題星2018-06-03

您可以通過答題星輕松地創建試卷

全階人生考試2018-06-03

各種考試題,題庫,初中,高中,大學四六

運動步數有氧達人2018-06-03

記錄運動步數,積累氧氣值。還可偷

每日養生app2018-06-03

每日養生,天天健康

體育訓練成績評定2018-06-03

通用課目體育訓練成績評定