gds
云數(shù)據(jù)倉(cāng)庫(kù)GDS工具
GaussDB(DWS)提供GDS(Gauss Data Service)工具,可以高效地進(jìn)行文本數(shù)據(jù)導(dǎo)入導(dǎo)出。 如圖,GDS服務(wù)器部署于集群每個(gè)物理節(jié)點(diǎn)上,可以實(shí)現(xiàn)數(shù)據(jù)的并行導(dǎo)入/導(dǎo)出,單機(jī)速度可達(dá)700MB/s。 圖片 基于GDS的數(shù)據(jù)并行導(dǎo)入/導(dǎo)出 https://res-static.hc-cdn.cn/cloudbu-site/china/zh-cn/hjm/dwssjdr.jpg 此外,借助外表數(shù)據(jù)封裝器(Foreign Data Wrapper,簡(jiǎn)稱FDW),不同的集群之間可以互相訪問數(shù)據(jù),例如在GaussDB集群A中訪問GaussDB集群B中的數(shù)據(jù)。結(jié)合GDS,可以實(shí)現(xiàn)跨集群數(shù)據(jù)一鍵式高速 遷移 。如下圖所示,通過GDS在兩個(gè)集群之間形成高效的實(shí)時(shí)數(shù)據(jù)中轉(zhuǎn)通路,將數(shù)據(jù)從源集群導(dǎo)出,不經(jīng)落盤直接導(dǎo)入目標(biāo)集群。 圖片 用GDS實(shí)現(xiàn)跨集群 數(shù)據(jù)遷移 https://res-static.hc-cdn.cn/cloudbu-site/china/zh-cn/hjm/dwssjdr1.png 其技術(shù)特點(diǎn)是: 使用方便簡(jiǎn)潔,一條SQL啟動(dòng)遷移業(yè)務(wù)(INSERT INTO … SELECT … FROM … [WHERE];)。 性能高效,充分利用兩端集群所有節(jié)點(diǎn)算力。 中間數(shù)據(jù)不落盤,不占用磁盤空間。 可以滿足:GaussDB(DWS)集群間全量數(shù)據(jù)遷移同步、GaussDB(DWS)集群間過濾條件數(shù)據(jù)遷移同步等場(chǎng)景的性能需求。