數(shù)據(jù)湖
云數(shù)據(jù)倉庫數(shù)據(jù)湖分析
數(shù)據(jù)湖 分析 整合數(shù)據(jù)資源,構(gòu)建 大數(shù)據(jù) 平臺(tái),發(fā)現(xiàn)數(shù)據(jù)價(jià)值,成為企業(yè)經(jīng)營的新趨勢(shì)和迫切訴求。DWS Express可直接對(duì)存儲(chǔ)在 對(duì)象存儲(chǔ)OBS 上的大數(shù)據(jù)平臺(tái)集成、處理后的數(shù)據(jù)進(jìn)行分析 優(yōu)勢(shì) 統(tǒng)一分析入口 以DWS的SQL作為上層應(yīng)用的統(tǒng)一入口,應(yīng)用開發(fā)人員使用熟悉的SQL語言即可訪問所有數(shù)據(jù) 實(shí)時(shí)交互式分析 針對(duì)即時(shí)的分析需求,分析人員通過DWS Express,可實(shí)時(shí)從大數(shù)據(jù)平臺(tái)中獲取信息 彈性伸縮 客戶可使用DWS Express提供的由成百上千節(jié)點(diǎn)組成的加速集群,相比本地托管集群,效率提升數(shù)百倍。 建議搭配使用: 數(shù)據(jù)湖探索 DLI、 MapReduce服務(wù) 、數(shù)據(jù)湖治理中心 DGC
云數(shù)據(jù)倉庫傳統(tǒng)數(shù)倉替換
傳統(tǒng)數(shù)倉替換 傳統(tǒng) 數(shù)據(jù)庫 或數(shù)倉產(chǎn)品面臨數(shù)據(jù)存不下、查不出、擴(kuò)容難、成本高的痛點(diǎn)。GaussDB(DWS)作為新一代全場(chǎng)景 數(shù)據(jù)倉庫 ,具備極致性能、高擴(kuò)展、極簡(jiǎn)易用、一站式分析等特性,滿足大數(shù)據(jù)時(shí)代企業(yè)構(gòu)建新型數(shù)倉的需求。 優(yōu)勢(shì) 平滑 遷移 提供配套的遷移工具,可支持Teradata、Oracle/Exadata、Greenplum等數(shù)據(jù)分析系統(tǒng)的平滑遷移 完備的數(shù)據(jù)庫及SQL能力 支持SQL 2003標(biāo)準(zhǔn),兼容Oracle/Teradata的部分語法和數(shù)據(jù)結(jié)構(gòu),支持全局事務(wù)、存儲(chǔ)過程、數(shù)據(jù)強(qiáng)一致性保證 庫倉一體 邏輯集群,支持一套集群容納 數(shù)據(jù)集 市、數(shù)據(jù)倉庫 建議搭配使用: 數(shù)據(jù)接入服務(wù) DIS、 云數(shù)據(jù)遷移 CDM 、數(shù)據(jù)湖治理中心 DGC
湖倉構(gòu)建數(shù)據(jù)湖建設(shè)和持續(xù)運(yùn)營
場(chǎng)景描述 數(shù)據(jù)湖建設(shè)和持續(xù)運(yùn)營,是指數(shù)據(jù)湖的初始化建設(shè)及后續(xù)日常的海量元數(shù)據(jù)及權(quán)限管理,因此客戶需要便捷高效的建設(shè)和管理方式。 傳統(tǒng)方式的弊端 · 僅支持通過計(jì)算引擎(Hive、Spark等)執(zhí)行SQL實(shí)現(xiàn)元數(shù)據(jù)的定義、修改、查詢,對(duì)客戶有一定的技能要求,缺少提升易用性的可視化界面。 · 一個(gè)完整的授權(quán)活動(dòng),需要針對(duì)計(jì)算引擎、 對(duì)象存儲(chǔ) 執(zhí)行兩次授權(quán)操作,對(duì)客戶操作帶來不便,易用性差。 服務(wù)優(yōu)勢(shì) · 站式可視化數(shù)據(jù)湖構(gòu)建:提供數(shù)據(jù)湖元數(shù)據(jù)統(tǒng)一定義和授權(quán)的可視化界面,支持客戶便捷操作,快速構(gòu)建。 · 聯(lián)動(dòng)授權(quán):支持在元數(shù)據(jù)授權(quán)的同時(shí), 自動(dòng)化 完成元數(shù)據(jù)所映射的文件目錄的授權(quán),使客戶授權(quán)操作更便捷和高效。 · 細(xì)粒度訪問控制:實(shí)現(xiàn)針對(duì)數(shù)據(jù)湖的庫、表、列級(jí)元數(shù)據(jù)的細(xì)粒度訪問控制,為業(yè)務(wù)數(shù)據(jù)的安全性提供有力保障。 建議搭配服務(wù):MapReduce服務(wù)、數(shù)據(jù)湖探索 DLI、云數(shù)據(jù)倉庫 GaussDB、 數(shù)據(jù)治理中心 DataArts Studio、 AI開發(fā)平臺(tái) ModelArts
云數(shù)據(jù)倉庫一站式BI解決方案
一站式BI解決方案 企業(yè)積累的海量數(shù)據(jù)及各種數(shù)據(jù)資產(chǎn),體量龐大,需高性能大數(shù)據(jù)平臺(tái)支撐進(jìn)行全量數(shù)據(jù)分析和挖掘。依托DWS+BI工具打造全局的、直觀的、關(guān)聯(lián)性的、可視化的運(yùn)營數(shù)字化分析平臺(tái) ,以數(shù)據(jù)分析來驅(qū)動(dòng)業(yè)務(wù)價(jià)值提升及管理提升 優(yōu)勢(shì) 多源數(shù)據(jù)接入 多源數(shù)據(jù)采集,打破數(shù)據(jù)孤島,形成統(tǒng)一的數(shù)據(jù)展現(xiàn)平臺(tái) 統(tǒng)一分析決策平臺(tái) 統(tǒng)一的數(shù)據(jù)決策平臺(tái),多維分析企業(yè)經(jīng)營數(shù)據(jù),有效支撐企業(yè)的經(jīng)營決策; 多場(chǎng)景展現(xiàn) 搭配BI工具多終端數(shù)據(jù)展現(xiàn)PC端/移動(dòng)端/大屏,滿足業(yè)務(wù)部門各種報(bào)表訴求。 建議搭配使用:云 數(shù)據(jù)遷移 CDM、數(shù)據(jù)湖治理中心 DGC、BI/報(bào)表軟件
湖倉構(gòu)建功能描述
實(shí)例類別 LakeFormation提供了共享、獨(dú)享實(shí)例類別,滿足不同場(chǎng)景下客戶對(duì)性能和成本的不同訴求。 共享型側(cè)重對(duì)成本、性價(jià)比要求較高的場(chǎng)景,適合中輕載企業(yè)應(yīng)用;獨(dú)享型對(duì)性能、穩(wěn)定性要求高的場(chǎng)景,適合重載企業(yè)應(yīng)用。 實(shí)例管理 LakeFormation提供實(shí)例的創(chuàng)建、總覽、刪除等基本功能,幫助您便捷的進(jìn)行實(shí)例管理,加速實(shí)現(xiàn)數(shù)據(jù)湖承載的業(yè)務(wù)的規(guī)劃和部署。 元 數(shù)據(jù)管理 LakeFormation提供數(shù)據(jù)湖元數(shù)據(jù)Catalog、Database、Table的創(chuàng)建、修改、刪除、查看等生命周期管理的功能。幫助您便捷的進(jìn)行數(shù)據(jù)湖初始化構(gòu)建以及持續(xù)運(yùn)營,集中式的統(tǒng)一管理LakeFormation實(shí)例下所有的元數(shù)據(jù),加速實(shí)現(xiàn)數(shù)據(jù)湖承載的業(yè)務(wù)的規(guī)劃和部署。 數(shù)據(jù)權(quán)限管理 LakeFormation提供針對(duì)Catalog、Database、Table等數(shù)據(jù)資源的授權(quán)、取消、查看等功能。幫助您對(duì)數(shù)據(jù)湖實(shí)現(xiàn)便捷的統(tǒng)一的數(shù)據(jù)權(quán)限管理。
湖倉構(gòu)建產(chǎn)品優(yōu)勢(shì)
生態(tài)開放 遵循開源事實(shí)標(biāo)準(zhǔn),支撐存量業(yè)務(wù)平滑演進(jìn) —提供兼容Hive/Spark/Flink/Trino社區(qū)的元數(shù)據(jù)接口,支持華為計(jì)算引擎和開源引擎的無縫對(duì)接 —提供兼容Ranger的權(quán)限接口,一次授權(quán),統(tǒng)一生效 —提供遷移工具,支持存量集群相關(guān)元數(shù)據(jù)的平滑遷移 數(shù)智融合 打通大數(shù)據(jù)和AI的數(shù)據(jù)壁壘,實(shí)現(xiàn)真正數(shù)智融合 —支持?jǐn)?shù)據(jù)庫、表、UDF、AI模型、非結(jié)構(gòu)化數(shù)據(jù)集等統(tǒng)一管理 —實(shí)現(xiàn)統(tǒng)一的細(xì)粒度數(shù)據(jù)權(quán)限管理,支持跨用戶/跨租戶的數(shù)據(jù)共享 大規(guī)格高可靠 支撐超大規(guī)模大數(shù)據(jù)業(yè)務(wù)的高可靠 —超大規(guī)模元數(shù)據(jù)管理能力 —統(tǒng)一權(quán)限管理能力,突破 IAM 細(xì)粒度權(quán)限瓶頸 —支持多AZ、多實(shí)例的容災(zāi)能力 簡(jiǎn)單易用 提供基于元數(shù)據(jù)的增值管理能力 —Serverless架構(gòu),開箱即用 —提供數(shù)據(jù)湖管理、元數(shù)據(jù)統(tǒng)計(jì)等管理能力