數(shù)據(jù)湖探索 DLI
數(shù)據(jù)湖探索產(chǎn)品介紹
本視頻介紹的是：華為云數(shù)據(jù)湖探索 DLI產(chǎn)品介紹:數(shù)據(jù)湖探索產(chǎn)品介紹
異構(gòu)數(shù)據(jù)整合
異構(gòu)數(shù)據(jù)整合，可以將海量數(shù)據(jù)中的一個或多個異構(gòu)的數(shù)據(jù)進行整合，進行統(tǒng)一的數(shù)據(jù)存儲、挖掘和分析。數(shù)據(jù)統(tǒng)一存儲，是用戶在自建的 數(shù)據(jù)倉庫 的過程中，通常是以任務調(diào)度為主，而數(shù)據(jù)源是之間對外提供的，是以整體進行分析處理的一種方法。例如，一個保險公司的保險公司在銷售查詢某一筆經(jīng)營資金，可以查詢到每個月的消費明細。面對這些數(shù)據(jù)的整合分析，就涉及到消費者、供應商、商品等信息。本文將對該場景進行了具體的描述。該場景主要描述的是查詢特定時間范圍內(nèi)的數(shù)據(jù)，以秒為單位的查詢時為度量，可以對查詢的時間、運營商、商品信息等進行過濾查詢。DIS的更多信息，請參見《數(shù)據(jù)湖探索用戶指南》。請務必確保您的賬戶下已在數(shù)據(jù)湖探索服務(DLI)里創(chuàng)建了DLI隊列。如何創(chuàng)建DLI隊列，在使用DLI進行跨源分析前，需要先建立跨源連接，打通數(shù)據(jù)源之間的網(wǎng)絡。通過增強型跨源連接，可對隊列進行網(wǎng)絡打通。具體操作請參考《數(shù)據(jù)湖探索用戶指南》中增強型跨源連接章節(jié)。如何設置安全組規(guī)則，請參見《 虛擬私有云 用戶指南》中“安全組”章節(jié)。SQL作業(yè)時，在作業(yè)編輯界面的“運行參數(shù)”處，“Flink版本”需要選擇“1.12”，勾選“保存作業(yè)日志”并設置保存作業(yè)日志的OBS桶，方便后續(xù)查看作業(yè)日志。