華為云計算 云知識 數(shù)據(jù)湖工廠應(yīng)用場景
數(shù)據(jù)湖工廠應(yīng)用場景

數(shù)據(jù)湖工廠服務(wù)(簡稱數(shù)據(jù)開發(fā)模塊)是華為云 大數(shù)據(jù) 重要的平臺產(chǎn)品,它可管理多種大數(shù)據(jù)服務(wù),提供一站式的大數(shù)據(jù)開發(fā)環(huán)境、全托管的大數(shù)據(jù)調(diào)度能力,極大降低用戶使用大數(shù)據(jù)的門檻,幫助用戶快速構(gòu)建大數(shù)據(jù)處理中心。

云上數(shù)倉快速搭建

通過數(shù)據(jù)開發(fā)模塊將線下 數(shù)據(jù)遷移 到華為云上,將 數(shù)據(jù)集 成到華為云大數(shù)據(jù)服務(wù)中,并在數(shù)據(jù)開發(fā)模塊中進(jìn)行數(shù)據(jù)開發(fā)。

圖1場景示例圖

數(shù)據(jù)湖工廠應(yīng)用場景1

數(shù)據(jù)分析業(yè)務(wù)流 自動化

通過數(shù)據(jù)開發(fā)模塊實現(xiàn)數(shù)據(jù)導(dǎo)入、清洗、機(jī)器學(xué)習(xí)、數(shù)據(jù)回傳、報表生成端到端流程自動化,把業(yè)務(wù)搬上自動化流水線。

圖2場景示例圖

數(shù)據(jù)湖工廠應(yīng)用場景2

海量日志輕松分析挖掘

通過DIS將日志數(shù)據(jù)接入到OBS存儲(或者Cloud Search服務(wù)),然后通過數(shù)據(jù)開發(fā)模塊服務(wù)編寫數(shù)據(jù)開發(fā)腳本和數(shù)據(jù)挖掘腳本,實現(xiàn)海量 日志分析 和挖掘。

圖3場景示例圖

數(shù)據(jù)湖工廠應(yīng)用場景3