檢測(cè)到您已登錄華為云國(guó)際站賬號(hào),為了您更好的體驗(yàn),建議您訪問(wèn)國(guó)際站服務(wù)網(wǎng)站 http://m.cqfng.cn/intl/zh-cn
不再顯示此消息
數(shù)據(jù)倉(cāng)庫(kù)服務(wù)幫助中心入口,詳情請(qǐng)單擊鏈接。
ql、HDFS等多源數(shù)據(jù)融合分析,并通過(guò)算子下推、加速集群等技術(shù)對(duì)分析性能進(jìn)行了大幅優(yōu)化,在數(shù)據(jù)免搬遷的前提下,實(shí)現(xiàn)了跨源數(shù)據(jù)免搬遷、高效分析。 GaussDB(DWS)云原生數(shù)據(jù)倉(cāng)庫(kù)支持冷熱數(shù)據(jù)多溫存儲(chǔ),熱數(shù)據(jù)存儲(chǔ)于數(shù)倉(cāng)內(nèi)部,以獲得良好的查詢分析性能,冷數(shù)據(jù)可分級(jí)存儲(chǔ)到更低成本
DWS字段設(shè)計(jì)規(guī)則 選擇數(shù)據(jù)類(lèi)型 在字段設(shè)計(jì)時(shí),基于查詢效率的考慮,一般遵循以下原則: 【建議】盡量使用高效數(shù)據(jù)類(lèi)型。 選擇數(shù)值類(lèi)型時(shí),在滿足業(yè)務(wù)精度的情況下,選擇數(shù)據(jù)類(lèi)型的優(yōu)先級(jí)從高到低依次為整數(shù)、浮點(diǎn)數(shù)、NUMERIC。 【建議】當(dāng)多個(gè)表存在邏輯關(guān)系時(shí),表示同一含義的字段應(yīng)該使用相同的數(shù)據(jù)類(lèi)型。
DWS字段設(shè)計(jì)規(guī)則 選擇數(shù)據(jù)類(lèi)型 在字段設(shè)計(jì)時(shí),基于查詢效率的考慮,一般遵循以下原則: 【建議】盡量使用高效數(shù)據(jù)類(lèi)型。 選擇數(shù)值類(lèi)型時(shí),在滿足業(yè)務(wù)精度的情況下,選擇數(shù)據(jù)類(lèi)型的優(yōu)先級(jí)從高到低依次為整數(shù)、浮點(diǎn)數(shù)、NUMERIC。 【建議】當(dāng)多個(gè)表存在邏輯關(guān)系時(shí),表示同一含義的字段應(yīng)該使用相同的數(shù)據(jù)類(lèi)型。
數(shù)據(jù)倉(cāng)庫(kù)咨詢與規(guī)劃服務(wù) 產(chǎn)品介紹 常見(jiàn)問(wèn)題 計(jì)費(fèi)說(shuō)明 父主題: 咨詢與規(guī)劃
2、技術(shù)元數(shù)據(jù) 數(shù)據(jù)源元數(shù)據(jù) 例如:數(shù)據(jù)源的 IP、端口、數(shù)據(jù)庫(kù)類(lèi)型;數(shù)據(jù)獲取的方式;數(shù)據(jù)存儲(chǔ)的結(jié)構(gòu);原數(shù)據(jù)各列的定義及 key 指對(duì)應(yīng)的值。ETL 元數(shù)據(jù) 根據(jù) ETL 目的的不同,可以分為兩類(lèi):數(shù)據(jù)清洗元數(shù)據(jù);數(shù)據(jù)處理元數(shù)據(jù)。數(shù)據(jù)清洗,主要目的是為了解決掉臟數(shù)據(jù)及規(guī)范數(shù)據(jù)格式;
概要:1)零售業(yè)務(wù)維度設(shè)計(jì)4步法2)維度表設(shè)計(jì)細(xì)節(jié)3)事實(shí)表設(shè)計(jì)細(xì)節(jié)一、維度模型4步設(shè)計(jì)法1)業(yè)務(wù)過(guò)程選擇 *通常由某個(gè)操作型業(yè)務(wù)系統(tǒng)支撐 *業(yè)務(wù)過(guò)程建立或獲取關(guān)鍵性度量2)粒度聲明 *事實(shí)表中的每個(gè)行的內(nèi)容應(yīng)當(dāng)如何描述 *最終事實(shí)表的粒度與主鍵應(yīng)該是等價(jià)的3)確認(rèn)維度 *who
DWS開(kāi)發(fā)設(shè)計(jì)建議 DWS總體開(kāi)發(fā)設(shè)計(jì)規(guī)范 DWS連接管理規(guī)范 DWS對(duì)象設(shè)計(jì)規(guī)范 DWS SQL開(kāi)發(fā)規(guī)范 DWS外表功能開(kāi)發(fā)規(guī)范 DWS存儲(chǔ)過(guò)程開(kāi)發(fā)規(guī)范 DWS各對(duì)象設(shè)計(jì)詳細(xì)規(guī)則
DWS開(kāi)發(fā)設(shè)計(jì)建議 DWS總體開(kāi)發(fā)設(shè)計(jì)規(guī)范 DWS連接管理規(guī)范 DWS對(duì)象設(shè)計(jì)規(guī)范 DWS SQL開(kāi)發(fā)規(guī)范 DWS外表功能開(kāi)發(fā)規(guī)范 DWS存儲(chǔ)過(guò)程開(kāi)發(fā)規(guī)范 DWS各對(duì)象設(shè)計(jì)詳細(xì)規(guī)則
數(shù)據(jù)倉(cāng)庫(kù)服務(wù)基于華為FusionInsight LibrA企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)內(nèi)核,提供即開(kāi)即用、可擴(kuò)展且完全托管的分析型數(shù)據(jù)庫(kù)服務(wù)。兼容PostgreSQL生態(tài),您可基于標(biāo)準(zhǔn)SQL,結(jié)合商業(yè)智能工具,經(jīng)濟(jì)高效地挖掘和分析海量數(shù)據(jù)。
數(shù)據(jù);數(shù)據(jù)庫(kù)設(shè)計(jì)是盡量避免冗余,數(shù)據(jù)倉(cāng)庫(kù)在設(shè)計(jì)是有意引入冗余;數(shù)據(jù)庫(kù)是為捕獲數(shù)據(jù)而設(shè)計(jì),數(shù)據(jù)倉(cāng)庫(kù)是為分析數(shù)據(jù)而設(shè)計(jì)。數(shù)據(jù)倉(cāng)庫(kù)有哪些優(yōu)勢(shì)?數(shù)據(jù)倉(cāng)庫(kù)支持完善的監(jiān)控管理能力,并提供專(zhuān)業(yè)高效的服務(wù)管理控制平臺(tái),用戶可以快速申請(qǐng)DWS集群并開(kāi)展業(yè)務(wù),減少運(yùn)維工作,專(zhuān)注業(yè)務(wù)發(fā)展和應(yīng)用開(kāi)發(fā)。與
數(shù)據(jù)倉(cāng)庫(kù)優(yōu)化與支持服務(wù) 產(chǎn)品介紹 常見(jiàn)問(wèn)題 計(jì)費(fèi)說(shuō)明 父主題: 優(yōu)化與提升
數(shù)據(jù)在數(shù)據(jù)倉(cāng)庫(kù)服務(wù)中安全嗎?有采取哪些管控措施或者說(shuō)管理方法去保障數(shù)據(jù)安全,這個(gè)可以展開(kāi)說(shuō)下嗎?
描述 適用場(chǎng)景 Hash 表數(shù)據(jù)按照分布列生成的hash值與DN實(shí)例的映射關(guān)系,將數(shù)據(jù)分布到各DN實(shí)例。 優(yōu)點(diǎn):每個(gè)DN僅包含部分數(shù)據(jù),占用整體空間小。 缺點(diǎn):數(shù)據(jù)分布的均勻程度強(qiáng)依賴(lài)分布列的選擇;JOIN關(guān)聯(lián)條件不包含各自分布列的場(chǎng)景存在節(jié)點(diǎn)間數(shù)據(jù)通信的消耗。 大表、事實(shí)表。 RoundRobin
數(shù)據(jù);數(shù)據(jù)庫(kù)設(shè)計(jì)是盡量避免冗余,數(shù)據(jù)倉(cāng)庫(kù)在設(shè)計(jì)是有意引入冗余;數(shù)據(jù)庫(kù)是為捕獲數(shù)據(jù)而設(shè)計(jì),數(shù)據(jù)倉(cāng)庫(kù)是為分析數(shù)據(jù)而設(shè)計(jì)。數(shù)據(jù)倉(cāng)庫(kù)有哪些優(yōu)勢(shì)?數(shù)據(jù)倉(cāng)庫(kù)支持完善的監(jiān)控管理能力,并提供專(zhuān)業(yè)高效的服務(wù)管理控制平臺(tái),用戶可以快速申請(qǐng)DWS集群并開(kāi)展業(yè)務(wù),減少運(yùn)維工作,專(zhuān)注業(yè)務(wù)發(fā)展和應(yīng)用開(kāi)發(fā)。與
我們談?wù)?span id="5bd5xrl" class='cur'>數(shù)據(jù)中臺(tái)之前, 我們也聽(tīng)到過(guò)數(shù)據(jù)平臺(tái)、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)湖的相關(guān)概念,它們都與數(shù)據(jù)有關(guān)系,但他們和數(shù)據(jù)中臺(tái)有什么樣的區(qū)別, 下面我們將圍繞數(shù)據(jù)平臺(tái)、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)湖和數(shù)據(jù)中臺(tái)的區(qū)別進(jìn)行介紹。 數(shù)據(jù)倉(cāng)庫(kù) 數(shù)據(jù)倉(cāng)庫(kù)(Data Warehouse),也稱(chēng)為企業(yè)數(shù)據(jù)倉(cāng)庫(kù),它是一個(gè)
元數(shù)據(jù)簡(jiǎn)介 按照傳統(tǒng)的定義,元數(shù)據(jù)(Metadata)是關(guān)于數(shù)據(jù)的數(shù)據(jù)。元數(shù)據(jù)打通了源數(shù)據(jù)、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)應(yīng)用,記錄了數(shù)據(jù)從產(chǎn)生到消費(fèi)的全過(guò)程。元數(shù)據(jù)主要記錄數(shù)據(jù)倉(cāng)庫(kù)中模型的定義、各層級(jí)間的映射關(guān)系、監(jiān)控數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)狀態(tài)及ETL的任務(wù)運(yùn)行狀態(tài)。在數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)中,元數(shù)據(jù)可以幫助數(shù)
PB級(jí)數(shù)據(jù)規(guī)模。 分布式存儲(chǔ) GaussDB(DWS)采用水平分表的方式,將數(shù)據(jù)表格的元組按照一定的分布策略分散存儲(chǔ)到多個(gè)節(jié)點(diǎn)。查詢的時(shí)候可以通過(guò)查詢條件過(guò)濾不必要的數(shù)據(jù),快速定位到數(shù)據(jù)存儲(chǔ)位置,從而極大提升數(shù)據(jù)庫(kù)性能。 在水平分表的基礎(chǔ)上,GaussDB(DWS)支持數(shù)據(jù)分區(qū)(
備份集全局一致性快照,保證恢復(fù)數(shù)據(jù)一致性。 細(xì)粒度備份恢復(fù) 支持集群、schema級(jí)別等多種備份恢復(fù),支持就地集群恢復(fù)。 更安全 采用加密傳輸,為數(shù)據(jù)安全保駕護(hù)航。 gs_dump和gs_restore gs_dump和gs_restore為邏輯備份工具,前者用于導(dǎo)出數(shù)據(jù)庫(kù)對(duì)象元數(shù)據(jù),可以將數(shù)據(jù)保存為文
查詢備份概要信息列表(OpenStack原生)(廢棄) 功能介紹 查詢備份概要信息列表。此接口已廢棄。 URI URI格式 GET /v2/{project_id}/backups 參數(shù)說(shuō)明 參數(shù) 是否必選 描述 project_id 是 項(xiàng)目ID。 獲取項(xiàng)目ID方法請(qǐng)參考 獲取項(xiàng)目ID