華為云計算 云知識 數(shù)據(jù)倉庫DWS應(yīng)用案例 數(shù)據(jù)處理耗時從天級縮短至小時級
數(shù)據(jù)倉庫DWS應(yīng)用案例 數(shù)據(jù)處理耗時從天級縮短至小時級

數(shù)據(jù)倉庫 服務(wù)(Data Warehouse Service,簡稱DWS)是一種即開即用、安全可靠的在線數(shù)據(jù)倉庫服務(wù),為用戶提供海量數(shù)據(jù)的存儲、挖掘和分析能力。

數(shù)據(jù)倉庫DWS應(yīng)用案例 數(shù)據(jù)處理耗時從天級縮短至小時級

客戶痛點

【數(shù)據(jù)處理耗時】:使用開源Hadoop處理數(shù)據(jù)耗時長,每次處理耗時1天;

【不支持關(guān)聯(lián)分析】:ES不能支持關(guān)聯(lián)等復(fù)雜查詢分析;

【數(shù)據(jù)更新難】:數(shù)據(jù)使用寬表存儲,維度數(shù)據(jù)變化需要更新整個寬表,工作量大。

華為云方案

ES+DWS 大數(shù)據(jù) 分析平臺;

利用DWS進(jìn)行數(shù)據(jù)清洗加工,支持?jǐn)?shù)據(jù)更新;

利用DWS的標(biāo)準(zhǔn)SQL實現(xiàn)數(shù)據(jù)復(fù)雜關(guān)聯(lián)查詢。

客戶價值

數(shù)據(jù)處理耗時從1天降至3個小時;

開發(fā)人員基于SQL語言可快速開發(fā)分析應(yīng)用,同時將可分析維度從2-3個擴(kuò)展為5-10個,擴(kuò)充業(yè)務(wù)范圍;

在DWS中維護(hù)維度數(shù)據(jù),再更新ES中數(shù)據(jù),降低了數(shù)據(jù)更新的工作量。