檢測到您已登錄華為云國際站賬號,為了您更好的體驗,建議您訪問國際站服務(wù)網(wǎng)站 http://m.cqfng.cn/intl/zh-cn
不再顯示此消息
IQ,支持秒級的數(shù)據(jù)庫備份恢復(fù)基于磁帶庫的備份恢復(fù)方式,沒有人真正演示過TB級數(shù)據(jù)恢復(fù)基于磁帶庫的備份恢復(fù)方式,沒有人真正演示過TB級數(shù)據(jù)恢復(fù)基于磁帶庫的備份恢復(fù)方式,沒有人真正演示過TB級數(shù)據(jù)恢復(fù)對超寬表的支持支持45000字段的寬表,大數(shù)據(jù)量字段增減容易支持,大數(shù)據(jù)量字段增減困
數(shù)據(jù)倉庫 表1 數(shù)據(jù)倉庫權(quán)限 權(quán)限 對應(yīng)API接口 授權(quán)項(Action) IAM項目 (Project) 企業(yè)項目 (Enterprise Project) 獲取數(shù)據(jù)倉庫列表 GET /v1.0/{project_id}/common/warehouses octopus:dataWarehouse:list
型系統(tǒng)中。2.集成性 不同操作型系統(tǒng)之間的數(shù)據(jù)一般是相互獨立、異構(gòu)的。而數(shù)據(jù)倉庫中的數(shù)據(jù)是對分散的數(shù)據(jù)進(jìn)行抽取、清理、轉(zhuǎn)換和匯總后得到的,這樣保證了數(shù)據(jù)倉庫內(nèi)的數(shù)據(jù)關(guān)于整個企業(yè)的一致性。圖3.2 說明一個保險公司綜合數(shù)據(jù)的簡單處理過程,其中數(shù)據(jù)倉庫中與“保險”主題有關(guān)的數(shù)據(jù)來自于
產(chǎn)生告警的角色名稱。 主機(jī)名 產(chǎn)生告警的主機(jī)名。 對系統(tǒng)的影響 Hive默認(rèn)數(shù)據(jù)倉庫被刪除,會導(dǎo)致在默認(rèn)數(shù)據(jù)倉庫中創(chuàng)建庫、創(chuàng)建表失敗,影響業(yè)務(wù)正常使用。 可能原因 Hive定時查看默認(rèn)數(shù)據(jù)倉庫的狀態(tài),發(fā)現(xiàn)Hive默認(rèn)數(shù)據(jù)倉庫被刪除。 處理步驟 檢查Hive默認(rèn)數(shù)據(jù)倉庫。 以roo
Informatic D正確3. (單選)關(guān)于數(shù)據(jù)倉庫與數(shù)據(jù)庫的差別,下面的敘述中不正確的是:A. 數(shù)據(jù)庫是面向事務(wù)的設(shè)計,數(shù)據(jù)倉庫是面向主題的設(shè)計B. 數(shù)據(jù)庫一般存儲歷史數(shù)據(jù),數(shù)據(jù)倉庫一般存儲在線數(shù)據(jù) 正確C. 數(shù)據(jù)庫設(shè)計是盡量避免冗余,數(shù)據(jù)倉庫是有意引入冗余B 提交提交答案正確 (6/6
數(shù)據(jù)倉庫 華為云數(shù)據(jù)倉庫高級工程師培訓(xùn) 父主題: 培訓(xùn)服務(wù)
種以上,而不重要的數(shù)據(jù)資產(chǎn)沒有強制要求。 2、SLA 數(shù)據(jù)時效性監(jiān)控 在確保數(shù)據(jù)準(zhǔn)確性的前提下,您需要進(jìn)一步讓數(shù)據(jù)能夠及時提供服務(wù),否則數(shù)據(jù)的價值將大幅降低。確保數(shù)據(jù)及時性是保障數(shù)據(jù)質(zhì)量的重要一環(huán)。為確保數(shù)據(jù)完整性,每天任務(wù)通常都是 0 點以后才開始執(zhí)行,計算前一天的數(shù)據(jù)。這些任務(wù)
Landing Zone設(shè)計原則 華為云基于自身實踐和大量Landing Zone項目的成功交付經(jīng)驗提煉了如下原則,您可以將其作為起點制定符合您企業(yè)所需的設(shè)計原則。 康威定律:按照康威定律,系統(tǒng)的技術(shù)架構(gòu)反映了所屬組織的架構(gòu)。Landing Zone的組織單元和賬號架構(gòu)應(yīng)該與企業(yè)的組織架構(gòu)和業(yè)
dquo;最高的數(shù)據(jù)都存 在數(shù)據(jù)庫和數(shù)倉里,支撐著企業(yè)的運轉(zhuǎn)。 但是,企業(yè)希望把生產(chǎn)經(jīng)營中的所有相關(guān)數(shù)據(jù),歷史的、實時的,在線的、離線的,內(nèi) 部的、外部的,結(jié)構(gòu)化的、非結(jié)構(gòu)化的,都能完整保存下來,方便“沙中淘金”??墒菚r間長了,有人覺得數(shù)倉還不夠,再造一
tion的需求。在云計算和大數(shù)據(jù)的沖擊下,成熟的數(shù)據(jù)倉庫理論甚至成為了架構(gòu)里的政治不正確。譬如我上一個服務(wù)過的軟件公司,就明確表示過像EDW和ETL這樣的字眼不能出現(xiàn)在市場定位中。 為什么大家開始對數(shù)據(jù)倉庫諱莫如深呢?恐怕傳統(tǒng)的數(shù)據(jù)倉庫給人留下過許多不好的印象:花錢多, 靈
創(chuàng)建DATABASE時必須選擇正確的數(shù)據(jù)庫編碼 違反規(guī)則的影響: 選錯數(shù)據(jù)庫編碼可能導(dǎo)致數(shù)據(jù)亂碼,且不支持直接修改數(shù)據(jù)庫編碼,需重新建庫重新導(dǎo)入數(shù)據(jù)。 方案建議: 通常建議建庫時指定ENCODING為UTF-8編碼,特殊場景根據(jù)實際情況而定。 規(guī)則2.3 創(chuàng)建DATABASE時必須選擇正確的數(shù)據(jù)庫兼容模式
DWS各對象設(shè)計詳細(xì)規(guī)則 DWS數(shù)據(jù)庫對象命名規(guī)則 DWS數(shù)據(jù)庫對象設(shè)計規(guī)則 DWS JDBC配置規(guī)則 DWS SQL編寫規(guī)則 自定義DWS外部函數(shù)(pgSQL/Java)使用規(guī)則 DWS PL/pgSQL使用規(guī)則 父主題: DWS開發(fā)設(shè)計建議
DWS各對象設(shè)計詳細(xì)規(guī)則 DWS數(shù)據(jù)庫對象命名規(guī)則 DWS數(shù)據(jù)庫對象設(shè)計規(guī)則 DWS JDBC配置規(guī)則 DWS SQL編寫規(guī)則 自定義DWS外部函數(shù)(pgSQL/Java)使用規(guī)則 DWS PL/pgSQL使用規(guī)則 父主題: DWS開發(fā)設(shè)計建議
應(yīng)提供標(biāo)準(zhǔn)、簡單的應(yīng)用輸出,為應(yīng)用維護(hù)人員提供明確的進(jìn)度顯示、錯誤描述和運行結(jié)果;為業(yè)務(wù)人員提供明確、直觀的報表、憑證輸出。 程序編寫原則 在PL/PGSQL中的SQL語句宜使用綁定變量。 在PL/PGSQL中的SQL語句宜使用RETURNING子句。 存儲過程使用原則: 對于單個存儲過程中Varchar或者V
1.數(shù)據(jù)治理是什么?數(shù)據(jù)治理:為公司業(yè)務(wù)越來越復(fù)雜而帶來的數(shù)據(jù)越來越臟、亂、差的問題,而提出一套治理數(shù)據(jù)的方法+工具集2. 數(shù)據(jù)治理的內(nèi)容這一部分,我將從六個方面來講解數(shù)據(jù)治理的內(nèi)容。2.1 數(shù)據(jù)標(biāo)準(zhǔn)定義數(shù)據(jù)維度及指標(biāo)需要清晰的、統(tǒng)一的、標(biāo)準(zhǔn)的定義。(這里的部分參考Hadoop數(shù)
對于不同的數(shù)據(jù)消費途徑,數(shù)據(jù)需要從高度一致性的基礎(chǔ)模型轉(zhuǎn)向便于數(shù)據(jù)展現(xiàn)和數(shù)據(jù)分析的維度模型。不同階段的數(shù)據(jù)因此需要使用不同架構(gòu)特點的數(shù)據(jù)模型與之相匹配,這也就是數(shù)據(jù)在數(shù)據(jù)倉庫里面進(jìn)行數(shù)據(jù)分層的原因。 數(shù)據(jù)在各層數(shù)據(jù)中間的流轉(zhuǎn),就是從一種數(shù)據(jù)模型轉(zhuǎn)向另外一種數(shù)據(jù)模型,這
要包含的是數(shù)據(jù)流入流出的過程,可以分為三層——源數(shù)據(jù)、數(shù)據(jù)倉庫、數(shù)據(jù)應(yīng)用: 從圖中可以看出數(shù)據(jù)倉庫的數(shù)據(jù)來源于不同的源數(shù)據(jù),并提供多樣的數(shù)據(jù)應(yīng)用,數(shù)據(jù)自上而下流入數(shù)據(jù)倉庫后向上層開放應(yīng)用,而數(shù)據(jù)倉庫只是中間集成化數(shù)據(jù)管理的一個平臺。 數(shù)據(jù)倉庫從各數(shù)據(jù)源獲取數(shù)據(jù)及在數(shù)據(jù)
TABLESPACE對象設(shè)計規(guī)范 規(guī)則2.8 禁止自定義TABLESPACE表空間 違反規(guī)則的影響: 分布式場景建表使用自定義表空間,導(dǎo)致表數(shù)據(jù)無法按照各DN分布式存儲,出現(xiàn)存儲傾斜。 方案建議: 創(chuàng)建表對象使用內(nèi)置默認(rèn)表空間。 父主題: DWS對象設(shè)計規(guī)范
VIEW對象設(shè)計規(guī)范 建議2.16 視圖的嵌套需避免超過三層 違反規(guī)范的影響: 視圖嵌套過深導(dǎo)致執(zhí)行計劃不穩(wěn)定、耗時不穩(wěn)定。 視圖依賴的對象重建風(fēng)險高,鎖沖突發(fā)生概率增大。 方案建議: 創(chuàng)建視圖直接基于物理表查詢,不建議嵌套視圖。 父主題: DWS對象設(shè)計規(guī)范
DWS開發(fā)設(shè)計建議 DWS總體開發(fā)設(shè)計規(guī)范 DWS連接管理規(guī)范 DWS對象設(shè)計規(guī)范 DWS SQL開發(fā)規(guī)范 DWS外表功能開發(fā)規(guī)范 DWS存儲過程開發(fā)規(guī)范 DWS各對象設(shè)計詳細(xì)規(guī)則