<ul id="ouw02"></ul>
  • 首頁 > 技術 > 正文

    【全球聚看點】火山引擎DataLeap引入任務模板,助力數據研發提效

    2023-04-24 19:42:11來源:中關村在線  

    在數倉及中臺研發過程中,研發人員經常需要在不同任務中維護相同或類似代碼,不僅費時費力,并且代碼迭代后也面臨不同業務單元邏輯性不一致的問題,對運維管理形成挑戰。

    一般來說,研發人員往往通過代碼模板來解決這一問題。具體而言,在核心數據處理邏輯相同的情況下,研發人員通過代碼模版傳入不同的任務參數,解決核心數據處理邏輯復用的問題,使得后續任務可以批量化,滿足實時調用需求。

    目前,任務模板已是火山引擎DataLeap研發治理能力之一,主要用于管理常用的任務邏輯,以此降低常用代碼的運維成本。在產品功能上,DataLeap任務模板支持豐富的引擎能力,包括LAS/EMR HSQL 、LAS/EMR Java Flink、LAS/EMR Flink SQL、shell任務,滿足離線實時任務的不同需求。此外,DataLeap還支持歷史版本管理,即保存或更新模板后,記錄各個版本更新情況,方便查看代碼設置及參數。


    (資料圖)

    在使用層面上,研發人員只需要三步驟即可完成任務模板創建,便捷復用核心數據處理邏輯。

    第一步:選中支持的任務類型

    · 在模板列表右側的“+”(更多)按鈕中,新建子目錄或新建任務模板。

    · 在新建任務模板窗口中,輸入以下參數,并新建模板。

    第二步:代碼編寫參數設置

    · 在任務模板的代碼開發編輯界面,通過 DDL 和 DML 編寫通用 SQL。

    · 表名、字段名分別可以用參數表示,以下以 LAS Flink SQL的邏輯處理,保存為test02模板。

    第三步:在任務開發中引用

    研發人員可以通過以下2種方式引用test02模板:

    · 方法1:在模板列表中,選擇模板并點擊后即可快速引用。

    · 方法2:在代碼編輯界面右上角選擇任務模板,選擇模板后,按需選擇是否最新版本的模板,在對參數設置之后,預覽代碼最終生成效果(如圖)。

    火山引擎DataLeap任務模板能力可應用于以下場景:

    · 場景1:將預先設計好的離線、實時任務模板保存后,即可在多個任務中引用此類型模板,快速實現代碼復用。

    · 場景2:將shell任務代碼制作為前置判斷條件,在數據分析前的觸發檢測運行條件是否滿足。

    除了任務模板之外,作為大數據研發治理套件,火山引擎DataLeap還可以提供數據集成、開發、運維、治理、資產、安全等能力,幫助用戶提升數據研發效率、降低管理成本,加速推動企業的數字化轉型。(作者:宋巖)

    標簽:

    相關閱讀

    精彩推薦

    相關詞

    推薦閱讀

    亚洲综合av一区二区三区| 久久久久一级精品亚洲国产成人综合AV区 | 亚洲综合久久成人69| 国产AV无码专区亚洲AV毛网站 | 97亚洲熟妇自偷自拍另类图片| 国产亚洲成av片在线观看| 中文字幕人成人乱码亚洲电影| 久久久久亚洲AV无码专区网站| 亚洲午夜福利精品久久| 成人精品国产亚洲欧洲| 国产午夜亚洲精品不卡免下载| 国产精品观看在线亚洲人成网| 国产亚洲情侣久久精品| 亚洲国产高清在线一区二区三区| 亚洲免费一区二区| 久久精品国产亚洲Aⅴ蜜臀色欲| 久久精品国产亚洲7777| 亚洲人精品午夜射精日韩| 亚洲精品夜夜夜妓女网| 久久亚洲国产视频| 久久亚洲美女精品国产精品| 亚洲经典在线中文字幕| 亚洲av片不卡无码久久| 亚洲一区二区三区高清在线观看| 亚洲国产一区二区三区在线观看 | 亚洲国产精品福利片在线观看 | 色噜噜的亚洲男人的天堂| 偷自拍亚洲视频在线观看99| 亚洲欧洲精品成人久久曰影片| 国产亚洲自拍一区| 国产V亚洲V天堂A无码| 亚洲精品免费观看| 亚洲另类春色国产精品| 亚洲色www永久网站| 亚洲а∨天堂久久精品| 亚洲日韩乱码中文无码蜜桃臀网站| 亚洲αv久久久噜噜噜噜噜| 91在线精品亚洲一区二区| 性xxxx黑人与亚洲| 国产精品无码亚洲精品2021 | 亚洲人成人无码网www国产|