華為云計算 云知識 云數(shù)據(jù)倉庫GDS工具
云數(shù)據(jù)倉庫GDS工具

GaussDB(DWS)提供GDS(Gauss Data Service)工具,可以高效地進(jìn)行文本數(shù)據(jù)導(dǎo)入導(dǎo)出。

如圖,GDS服務(wù)器部署于集群每個物理節(jié)點(diǎn)上,可以實(shí)現(xiàn)數(shù)據(jù)的并行導(dǎo)入/導(dǎo)出,單機(jī)速度可達(dá)700MB/s。

圖片 基于GDS的數(shù)據(jù)并行導(dǎo)入/導(dǎo)出

此外,借助外表數(shù)據(jù)封裝器(Foreign Data Wrapper,簡稱FDW),不同的集群之間可以互相訪問數(shù)據(jù),例如在GaussDB集群A中訪問GaussDB集群B中的數(shù)據(jù)。結(jié)合GDS,可以實(shí)現(xiàn)跨集群數(shù)據(jù)一鍵式高速 遷移 。如下圖所示,通過GDS在兩個集群之間形成高效的實(shí)時數(shù)據(jù)中轉(zhuǎn)通路,將數(shù)據(jù)從源集群導(dǎo)出,不經(jīng)落盤直接導(dǎo)入目標(biāo)集群。

圖片 用GDS實(shí)現(xiàn)跨集群 數(shù)據(jù)遷移

其技術(shù)特點(diǎn)是:

使用方便簡潔,一條SQL啟動遷移業(yè)務(wù)(INSERT INTO … SELECT … FROM … [WHERE];)。

性能高效,充分利用兩端集群所有節(jié)點(diǎn)算力。

中間數(shù)據(jù)不落盤,不占用磁盤空間。

可以滿足:GaussDB(DWS)集群間全量數(shù)據(jù)遷移同步、GaussDB(DWS)集群間過濾條件數(shù)據(jù)遷移同步等場景的性能需求。

云數(shù)據(jù)倉庫GDS工具