五月婷婷丁香性爱|j久久一级免费片|久久美女福利视频|中文观看在线观看|加勒比四区三区二|亚洲裸女视频网站|超碰97AV在线69网站免费观看|有码在线免费视频|久久青青日本视频|亚洲国产AAAA

數(shù)據治理中心產品功能

使用功能

一站式數(shù)據運營平臺

貫穿數(shù)據全流程的一站式治理運營平臺，幫助企業(yè)構建完整的數(shù)據中臺解決方案。

豐富的數(shù)據開發(fā)類型

支持多人在線協(xié)作開發(fā)，提供豐富的調度配置策略與海量的作業(yè)調度能力。

統(tǒng)一調度和運維

全面托管的調度，支持多種調度周期。

數(shù)據管理
支持可視化和DDL方式管理數(shù)據庫表，支持管理DWS、DLI、MRS Hive等多種數(shù)據倉庫。
作業(yè)開發(fā)
支持CDM、MRS、Spark等多種數(shù)據處理節(jié)點，通過任務間依賴完成復雜數(shù)據分析處理。
腳本開發(fā)
提供在線腳本編輯器，支持多人協(xié)作進行SQL、Python、Shell腳本在線代碼開發(fā)和調測。支持導入和導出腳本。
資源管理
支持統(tǒng)一管理在腳本開發(fā)和作業(yè)開發(fā)使用到的file、jar、archive類型的資源。
作業(yè)調度
持單次調度、周期調度和事件驅動調度，周期調度支持多種調度周期。 作業(yè)調度支持多種云服務的多種類型的任務混合編排。
運維管理
支持對作業(yè)進行運行、暫停、恢復、終止等多種操作。 支持查看作業(yè)和其內各任務節(jié)點的運行詳情。
配置管理
支持作業(yè)空間級的配置管理，例如環(huán)境變量、調度身份、參數(shù)模板等配置。

管理功能

數(shù)據集成

多種方式異構數(shù)據源高效接入，支持用戶穩(wěn)定高效地對海量數(shù)據進行移動。

數(shù)據架構

數(shù)據建模可視化、自動化、智能化。通過統(tǒng)一指標平臺建設實現(xiàn)規(guī)范化指標體系。

數(shù)據服務

提升訪問查詢檢索效率。為您提供快速將數(shù)據表生成數(shù)據API的能力。

表/文件/整庫遷移
支持批量遷移表或者文件，同構/異構數(shù)據庫之間整庫遷移
文件校驗一致性
檢查端到端文件的一致性，并輸出校驗結果。
數(shù)據標準
構建統(tǒng)一的數(shù)據標準體系，數(shù)據標準流程化。用戶可基于行業(yè)標準，對數(shù)據取值進行標準化，從而提升數(shù)據質量和易用性。
權限管理
設置不同的訪問權限，以達到不同員工之間的權限隔離，進行精細的權限管理。
數(shù)據建模
構建統(tǒng)一的數(shù)據模型體系，通過規(guī)范定義和數(shù)據建模，自頂向下構建企業(yè)數(shù)據分層體系，便于數(shù)據的流通、共享，提升數(shù)據使用效率。
文件加密
在遷移文件到文件系統(tǒng)時，數(shù)據集成支持對寫入云端的文件進行加密。
提升訪問查詢檢索效率
為企業(yè)搭建統(tǒng)一的數(shù)據服務總線，幫助企業(yè)統(tǒng)一管理對內對外的API服務。
快速開發(fā)一個作業(yè)

  • 開發(fā)一個Pipeline作業(yè)

    對已新建的Pipeline作業(yè)進行開發(fā)和配置。Pipeline模式作業(yè)包含批處理作業(yè)和實時處理作業(yè)（包含多種不同類型的節(jié)點算子）。

    了解詳情

  • 開發(fā)一個單任務作業(yè)

    對已新建的單任務作業(yè)進行開發(fā)和配置。單任務作業(yè)包含批處理作業(yè)（各種SQL腳本和Data Migration）和實時處理作業(yè)（DLI Spark、Flink SQL、Flink JAR）。

    了解詳情

查看更多
快速開發(fā)一個作業(yè)

  • 開發(fā)一個Pipeline作業(yè)

    對已新建的Pipeline作業(yè)進行開發(fā)和配置。Pipeline模式作業(yè)包含批處理作業(yè)和實時處理作業(yè)（包含多種不同類型的節(jié)點算子）。

  • 開發(fā)一個單任務作業(yè)

    對已新建的單任務作業(yè)進行開發(fā)和配置。單任務作業(yè)包含批處理作業(yè)（各種SQL腳本和Data Migration）和實時處理作業(yè)（DLI Spark、Flink SQL、Flink JAR）。

數(shù)據治理中心數(shù)據開發(fā)使用指導

  • 作業(yè)調度支持每月最后一天 *HOT*

    在配置作業(yè)配置調度時，可以選擇每個月的最后一天執(zhí)行。

    在配置作業(yè)配置調度時，可以選擇每個月的最后一天執(zhí)行。

  • 補數(shù)據場景使用介紹 *TOP*

    補數(shù)據特性幫助用戶補充以前時間段內的歷史業(yè)務數(shù)據。

    補數(shù)據特性幫助用戶補充以前時間段內的歷史業(yè)務數(shù)據。

  • 生成元數(shù)據

    通過創(chuàng)建數(shù)據表去定義元數(shù)據的屬性、類型等。通過關聯(lián)數(shù)據表會自動生成元數(shù)據。

    通過創(chuàng)建數(shù)據表去定義元數(shù)據的屬性、類型等。通過關聯(lián)數(shù)據表會自動生成元數(shù)據。

  • 獲取SQL節(jié)點的輸出結果值 *HOT*

    獲取SQL節(jié)點的輸出結果值，并將結果應用于后續(xù)作業(yè)節(jié)點或進行判斷。

    獲取SQL節(jié)點的輸出結果值，并將結果應用于后續(xù)作業(yè)節(jié)點或進行判斷。

  • IF條件判斷教程

    在進行作業(yè)編排時，想要實現(xiàn)通過設置條件，選擇不同的執(zhí)行路徑，可使用IF條件判斷。

    在進行作業(yè)編排時，想要實現(xiàn)通過設置條件，選擇不同的執(zhí)行路徑，可使用IF條件判斷。

  • For Each節(jié)點使用介紹

    開發(fā)作業(yè)時，任務的參數(shù)有差異但處理邏輯一致，通過For Each節(jié)點避免重復開發(fā)作業(yè)。

    開發(fā)作業(yè)時，任務的參數(shù)有差異但處理邏輯一致，通過For Each節(jié)點避免重復開發(fā)作業(yè)。

  • 獲取Rest Client節(jié)點返回值教程

    本教程詳細介紹如何獲取Rest Client的返回值。

    本教程介紹如何獲取Rest Client的返回值。

  • 開發(fā)一個Python腳本

    本教程介紹如何在數(shù)據開發(fā)模塊上開發(fā)并執(zhí)行Python腳本示例。

    本教程介紹如何在數(shù)據開發(fā)模塊上開發(fā)并執(zhí)行Python腳本示例。

  • 開發(fā)一個Hive SQL作業(yè)

    本教程介紹如何在數(shù)據開發(fā)模塊上進行Hive SQL開發(fā)。

    本教程介紹如何在數(shù)據開發(fā)模塊上進行Hive SQL開發(fā)。

  • 開發(fā)一個DWS SQL作業(yè)

    本教程介紹如何在數(shù)據開發(fā)模塊上通過DWS SQL節(jié)點進行作業(yè)開發(fā)。

    本教程介紹如何在數(shù)據開發(fā)模塊上通過DWS SQL節(jié)點進行作業(yè)開發(fā)。

  • 開發(fā)一個DLI Spark作業(yè)

    本教程通過一個例子演示如何在數(shù)據開發(fā)模塊中提交一個Spark作業(yè)。

    本教程通過一個例子演示如何在數(shù)據開發(fā)模塊中提交一個Spark作業(yè)。

  • 開發(fā)一個MRS Flink作業(yè)

    本教程介紹如何在數(shù)據開發(fā)模塊上進行MRS Flink作業(yè)開發(fā)。通過MRS Flink作業(yè)實現(xiàn)統(tǒng)計單詞的個數(shù)。

    本教程介紹如何在數(shù)據開發(fā)模塊上進行MRS Flink作業(yè)開發(fā)。通過MRS Flink作業(yè)實現(xiàn)統(tǒng)計單詞的個數(shù)。

  • 開發(fā)一個MRS Spark Python作業(yè)

    本教程介紹如何在數(shù)據開發(fā)模塊上進行MRS Spark Python作業(yè)開發(fā)。

    本教程介紹如何在數(shù)據開發(fā)模塊上進行MRS Spark Python作業(yè)開發(fā)。

  • Env內嵌對象

    Env內嵌對象提供了獲取環(huán)境變量值的方法以及應用舉例。

    Env內嵌對象提供了獲取環(huán)境變量值的方法以及應用舉例。

  • Job內嵌對象

    提供獲取作業(yè)中上一節(jié)點的輸出消息、作業(yè)調度計劃時間、作業(yè)執(zhí)行時間等屬性和方法。

    提供獲取作業(yè)中上一節(jié)點的輸出消息、作業(yè)調度計劃時間、作業(yè)執(zhí)行時間等屬性和方法。

  • StringUtil內嵌對象

    StringUtil內嵌對象提供一系列字符串操作方法，例如從一個字符串中截取一個子字符串。

    StringUtil內嵌對象提供一系列字符串操作方法，例如從一個字符串中截取一個子字符串。

  • DateUtil內嵌對象

    DateUtil內嵌對象提供了一系列時間格式化、時間計算方法。

    DateUtil內嵌對象提供了一系列時間格式化、時間計算方法。

  • JSONUtil內嵌對象

    JSONUtil內嵌對象提供了JSON對象方法和應用舉例。

    JSONUtil內嵌對象提供了JSON對象方法和應用舉例。

  • Loop內嵌對象

    使用Loop內嵌對象可獲取For Each節(jié)點數(shù)據集中的數(shù)據。

    使用Loop內嵌對象可獲取For Each節(jié)點數(shù)據集中的數(shù)據。

  • OBSUtil內嵌對象

    OBSUtil內嵌對象提供了一系列針對OBS的操作方法，例如判斷OBS文件或目錄是否存在。

    OBSUtil內嵌對象提供了一系列針對OBS的操作方法，例如判斷OBS文件或目錄是否存在。

  • 常用的EL表達式

    該指導總體介紹數(shù)據開發(fā)中常用的EL表達式以及應用示例。

    該指導總體介紹數(shù)據開發(fā)中常用的EL表達式以及應用示例。

  • 簡易變量集

    簡易變量集提供一系列自定義變量，自定義參數(shù)會根據任務調度的業(yè)務日期、計劃時間等自動替換為具體的值，實現(xiàn)動態(tài)替換。

    提供一系列自定義變量，自定義參數(shù)會根據任務調度的業(yè)務日期、計劃時間等自動替換為具體的值，實現(xiàn)動態(tài)替換。

  • 表達式使用示例

    在數(shù)據開發(fā)中EL表達式的靈活應用（如何在腳本中使用變量、作業(yè)傳遞參數(shù)給SQL腳本變量、參數(shù)中如何使用EL表達式）。

    通過本示例，用戶可以了解數(shù)據開發(fā)模塊EL表達式的使用方法。

  • 配置環(huán)境變量

    配置作業(yè)參數(shù)時，當某參數(shù)隸屬于多個作業(yè)，可將此參數(shù)提取出來作為環(huán)境變量，環(huán)境變量支持導入和導出。

    配置作業(yè)參數(shù)時，當某參數(shù)隸屬于多個作業(yè)，可將此參數(shù)提取出來作為環(huán)境變量，環(huán)境變量支持導入和導出。

  • 配置調度身份

    配置作業(yè)調度身份后，作業(yè)執(zhí)行過程中，以配置的調度身份與其他服務交互。調度身份分為委托和IAM賬戶兩大類。

    配置作業(yè)調度身份后，作業(yè)執(zhí)行過程中，以配置的調度身份與其他服務交互。調度身份分為委托和IAM賬戶兩大類。

  • 配置節(jié)點并發(fā)數(shù)

    設置一個作業(yè)空間同一時間允許正在運行的作業(yè)的最大并發(fā)數(shù)。用戶根據實際業(yè)務需要配置節(jié)點的最大并發(fā)數(shù)。

    設置一個作業(yè)空間同一時間允許正在運行的作業(yè)的最大并發(fā)數(shù)。用戶根據實際業(yè)務需要配置節(jié)點的最大并發(fā)數(shù)。

  • 配置默認項

    主要介紹默認項的配置。當前只有DAYU Administrator或Tenant Administrator權限的用戶才有默認配置項的相關操作權限。

    主要介紹默認項的配置。當前只有DAYU Administrator或Tenant Administrator權限的用戶才有默認配置項的相關操作權限。