檢測到您已登錄華為云國際站賬號,為了您更好的體驗(yàn),建議您訪問國際站服務(wù)網(wǎng)站 http://m.cqfng.cn/intl/zh-cn
不再顯示此消息
數(shù)據(jù)類型映射關(guān)系 由于異構(gòu)數(shù)據(jù)庫之間的數(shù)據(jù)類型不是一一對應(yīng)的,所以數(shù)據(jù)復(fù)制服務(wù)在進(jìn)行遷移或同步時(shí),會根據(jù)兩種不同的數(shù)據(jù)庫類型進(jìn)行對應(yīng)的數(shù)據(jù)類型映射。 本章節(jié)根據(jù)不同的數(shù)據(jù)庫引擎,提供對應(yīng)的數(shù)據(jù)庫映射關(guān)系列表,方便您在進(jìn)行數(shù)據(jù)庫遷移或同步的時(shí)候參考。
圖1 數(shù)據(jù)集成定位 產(chǎn)品功能 表/文件/整庫遷移 支持批量遷移表或者文件,還支持同構(gòu)/異構(gòu)數(shù)據(jù)庫之間整庫遷移,一個(gè)作業(yè)即可遷移幾百張表。
數(shù)據(jù)工坊 DWR 數(shù)據(jù)工坊 DWR 數(shù)據(jù)工坊DWR是開放的近數(shù)據(jù)處理服務(wù)。支持易用的工作流編排和開放生態(tài)的數(shù)據(jù)處理算子市場,能夠?qū)崿F(xiàn)靈活的數(shù)據(jù)及時(shí)處理。 數(shù)據(jù)工坊DWR是開放的近數(shù)據(jù)處理服務(wù)。支持易用的工作流編排和開放生態(tài)的數(shù)據(jù)處理算子市場,能夠?qū)崿F(xiàn)靈活的數(shù)據(jù)及時(shí)處理。
解決方案 DataArts Studio數(shù)據(jù)架構(gòu)支持的建模方法有以下三種: 關(guān)系建模 關(guān)系建模是用實(shí)體關(guān)系(Entity Relationship,ER)模型描述企業(yè)業(yè)務(wù),它在范式理論上符合3NF,出發(fā)點(diǎn)是整合數(shù)據(jù),將各個(gè)系統(tǒng)中的數(shù)據(jù)以整個(gè)企業(yè)角度按主題進(jìn)行相似性組合和合并,并進(jìn)行一致性處理
什么是數(shù)據(jù)安全中心 數(shù)據(jù)安全中心服務(wù)(Data Security Center,DSC)是新一代的云原生數(shù)據(jù)安全管理平臺,提供數(shù)據(jù)分級分類、數(shù)據(jù)脫敏、數(shù)據(jù)水印、API數(shù)據(jù)保護(hù)等基礎(chǔ)數(shù)據(jù)安全能力,通過資產(chǎn)地圖整體呈現(xiàn)云上數(shù)據(jù)安全態(tài)勢,實(shí)現(xiàn)一站式數(shù)據(jù)安全運(yùn)營能力。
不同于公有云上的通用型大數(shù)據(jù)相關(guān)產(chǎn)品,物聯(lián)網(wǎng)數(shù)據(jù)分析服務(wù)與資產(chǎn)模型深度整合,在相關(guān)數(shù)據(jù)分析作業(yè)的定義中,開發(fā)者可以方便引用物聯(lián)網(wǎng)的模型數(shù)據(jù),大大提升數(shù)據(jù)分析的效率 一站式開發(fā)體驗(yàn) 大數(shù)據(jù)開發(fā)技術(shù)門檻較高,而華為云物聯(lián)網(wǎng)數(shù)據(jù)分析服務(wù)整合了大數(shù)據(jù)分析領(lǐng)域的最佳實(shí)踐,為開發(fā)者打造一站式數(shù)據(jù)開發(fā)體驗(yàn)
數(shù)據(jù)庫和應(yīng)用遷移 UGO 數(shù)據(jù)庫和應(yīng)用遷移 UGO 專注于異構(gòu)數(shù)據(jù)庫結(jié)構(gòu)遷移的專業(yè)云服務(wù)。通過數(shù)據(jù)庫評估、自動化語法轉(zhuǎn)換,幫助用戶提前識別遷移適配點(diǎn),提升遷移效率,最大化降低用戶的數(shù)據(jù)庫遷移成本。?????????????????? 專注于異構(gòu)數(shù)據(jù)庫結(jié)構(gòu)遷移的專業(yè)云服務(wù)。
這篇文章講述的是數(shù)據(jù)整合。希望這篇數(shù)據(jù)清洗的文章對您有所幫助!
知識圖譜應(yīng)用 知識圖譜應(yīng)用 基于圖引擎服務(wù)的知識圖譜,融合各種異構(gòu)異質(zhì)數(shù)據(jù),可以支持更大的規(guī)模以及更高的性能 能幫助您 存儲海量知識 融合各種異構(gòu)異質(zhì)數(shù)據(jù),方便治理,規(guī)??蛇_(dá)千億級 快速關(guān)聯(lián)查詢 在海量知識中快速關(guān)聯(lián)查詢秒級響應(yīng),搜索結(jié)果更準(zhǔn)確 學(xué)習(xí)路徑識別及推薦 通過知識點(diǎn)的先修關(guān)系
查看數(shù)據(jù)血緣 首先在數(shù)據(jù)目錄組件完成元數(shù)據(jù)采集任務(wù),當(dāng)數(shù)據(jù)開發(fā)作業(yè)滿足自動血緣解析要求或已手動配置血緣,然后成功完成作業(yè)調(diào)度后,則可以在數(shù)據(jù)目錄模塊可視化查看數(shù)據(jù)血緣關(guān)系。 約束限制 數(shù)據(jù)血緣關(guān)系更新依賴于作業(yè)調(diào)度,數(shù)據(jù)血緣關(guān)系是基于最新的作業(yè)調(diào)度實(shí)例產(chǎn)生的。
場景五:其他異構(gòu)數(shù)據(jù)庫遷移到DDM 其他異構(gòu)數(shù)據(jù)庫,如Oracle、PostgreSQL、SQL Server等數(shù)據(jù)遷移,可以參考華為云數(shù)據(jù)遷移(CDM)服務(wù)用戶指南或者在管理控制臺右上角,選擇"工單 > 新建工單",提交申請。 父主題: 數(shù)據(jù)遷移
數(shù)據(jù)開發(fā)概述 數(shù)據(jù)開發(fā)是一個(gè)一站式的大數(shù)據(jù)協(xié)同開發(fā)平臺,提供全托管的大數(shù)據(jù)調(diào)度能力。它可管理多種大數(shù)據(jù)服務(wù),極大降低用戶使用大數(shù)據(jù)的門檻,幫助您快速構(gòu)建大數(shù)據(jù)處理中心。
圖1 選擇數(shù)據(jù)地圖或數(shù)據(jù)目錄 按下F12,打開開發(fā)者調(diào)試工具,然后選擇Network功能。 圖2 選擇Network 在數(shù)據(jù)地圖的“首頁”界面或“數(shù)據(jù)搜索”界面,或者在數(shù)據(jù)目錄的“總覽”界面或“數(shù)據(jù)目錄”界面,選擇需要查詢guid的資產(chǎn),并單擊資產(chǎn)名進(jìn)入資產(chǎn)詳情頁。
異構(gòu)容災(zāi)實(shí)例無需用戶做任何操作,容災(zāi)建設(shè)和維護(hù),切換都由華為云完成。 約束限制 存在以下場景則無法創(chuàng)建異構(gòu)容災(zāi)實(shí)例: 表1 限制條件 限制場景 原因 未開啟Binlog 原實(shí)例和容災(zāi)實(shí)例之間需要使用Binlog實(shí)時(shí)同步數(shù)據(jù)。 Binlog格式不是row 可能導(dǎo)致容災(zāi)鏈路中斷。
數(shù)據(jù)加工 數(shù)據(jù)復(fù)制服務(wù)支持對同步的對象進(jìn)行加工,即可以為選擇的對象添加規(guī)則。各鏈路支持的加工規(guī)則不一樣,目前僅部分鏈路支持數(shù)據(jù)加工,支持數(shù)據(jù)加工鏈路參考表1,具體操作方法可參考對應(yīng)的內(nèi)容。
數(shù)據(jù)質(zhì)量 業(yè)務(wù)指標(biāo)監(jiān)控(待下線) 數(shù)據(jù)質(zhì)量監(jiān)控 使用教程
通過數(shù)據(jù)盤創(chuàng)建數(shù)據(jù)盤鏡像 操作場景 數(shù)據(jù)盤鏡像是只包含用戶業(yè)務(wù)數(shù)據(jù)的鏡像,您可以通過創(chuàng)建數(shù)據(jù)盤鏡像將彈性云服務(wù)器數(shù)據(jù)盤上的業(yè)務(wù)數(shù)據(jù)保存。數(shù)據(jù)盤鏡像可用來創(chuàng)建新的云硬盤,從而實(shí)現(xiàn)用戶業(yè)務(wù)數(shù)據(jù)的遷移。 如果您有以下使用場景,建議通過數(shù)據(jù)盤鏡像來實(shí)現(xiàn)。
相對于數(shù)據(jù)共享交換或其他數(shù)據(jù)開放形式,使用數(shù)據(jù)服務(wù)進(jìn)行數(shù)據(jù)開放具備如下優(yōu)勢: 統(tǒng)一接口標(biāo)準(zhǔn),減少上層應(yīng)用對接工作量。 將數(shù)據(jù)邏輯沉淀至數(shù)據(jù)平臺,實(shí)現(xiàn)應(yīng)用邏輯與數(shù)據(jù)邏輯解耦,在減少數(shù)據(jù)模型的重復(fù)開發(fā)的同時(shí),避免數(shù)據(jù)邏輯調(diào)整帶來的“散彈式修改”。
數(shù)據(jù)水印功能會不會修改源數(shù)據(jù)? 華為云數(shù)據(jù)安全中心服務(wù)的數(shù)據(jù)水印功能不會修改源數(shù)據(jù)。 使用數(shù)據(jù)水印功能時(shí),DSC通過調(diào)用OBS桶數(shù)據(jù)或者本地文件,將水印信息嵌入到文件后生成新的文檔,該文檔會下載到您指定的本地路徑,所以對源數(shù)據(jù)不會有任何影響。更詳細(xì)的了解,請參考數(shù)據(jù)水印章節(jié)。
采集數(shù)據(jù)源的元數(shù)據(jù) 元數(shù)據(jù)簡介 配置元數(shù)據(jù)采集任務(wù) 查看任務(wù)監(jiān)控 父主題: 數(shù)據(jù)目錄