CDM （Cloud Data Migration）基于分布式計(jì)算框架，實(shí)現(xiàn)數(shù)據(jù)高效批量 遷移 ，支持包括關(guān)系 數(shù)據(jù)庫 ，OLAP數(shù)據(jù)庫，NoSQL數(shù)據(jù)庫， 大數(shù)據(jù) 存儲，文件存儲等常用數(shù)據(jù)源。提供云上和云下端到端 數(shù)據(jù)遷移 解決方案，滿足大數(shù)據(jù)場景下的各種數(shù)據(jù)遷移訴求。
與DRS區(qū)別，CDM遷移數(shù)據(jù)庫是遷移表數(shù)據(jù)，不涉及索引、視圖等，針對 數(shù)據(jù)庫遷移 選擇DRS工具。
產(chǎn)品功能
?表/文件/整庫遷移支持批量遷移表或者文件，還支持同構(gòu)/異構(gòu)數(shù)據(jù)庫之間整庫遷移，一個(gè)作業(yè)即可遷移幾百張表。
?增量數(shù)據(jù)遷移支持文件增量遷移、關(guān)系型數(shù)據(jù)庫增量遷移、HBase/CloudTable增量遷移，以及使用Where條件配合時(shí)間變量函數(shù)實(shí)現(xiàn)增量數(shù)據(jù)遷移。
?事務(wù)模式遷移支持當(dāng)CDM作業(yè)執(zhí)行失敗時(shí)，將數(shù)據(jù)回滾到作業(yè)開始之前的狀態(tài)，自動(dòng)清理目的表中的數(shù)據(jù)。
?字段轉(zhuǎn)換支持去隱私、字符串操作、日期操作等常用字段的數(shù)據(jù)轉(zhuǎn)換功能。
?文件加密在遷移文件到文件系統(tǒng)時(shí)，CDM支持對寫入云端的文件進(jìn)行加密。
?MD5校驗(yàn)一致性支持使用MD5校驗(yàn)，檢查端到端文件的一致性，并輸出校驗(yàn)結(jié)果。
??臟數(shù)據(jù)歸檔支持將遷移過程中處理失敗的、被清洗過濾掉的、不符合字段轉(zhuǎn)換或者不符合清洗規(guī)則的數(shù)據(jù)單獨(dú)歸檔到臟數(shù)據(jù)日志中，便于用戶查看。并支持設(shè)置臟數(shù)據(jù)比例閾值，來決定任務(wù)是否成功。
