檢測到您已登錄華為云國際站賬號,為了您更好的體驗,建議您訪問國際站服務(wù)網(wǎng)站 http://m.cqfng.cn/intl/zh-cn
不再顯示此消息
圖2 設(shè)置 API 分配配額2 父主題: 數(shù)據(jù)服務(wù)
快速部署 本章節(jié)主要幫助用戶快速部署“輕量離線大數(shù)據(jù)解決方案”。 表1 參數(shù)填寫說明 參數(shù)名稱 類型 是否必填 參數(shù)解釋 默認值 subnet_id String 必填 子網(wǎng)ID,該模板使用已有子網(wǎng),請選擇后端業(yè)務(wù)服務(wù)器所在虛擬私有云VPC內(nèi)子網(wǎng),查詢子網(wǎng)ID請參考部署指南。
默認情況下,大數(shù)據(jù)集群內(nèi)組件間的通信是不加密的,為防止數(shù)據(jù)在公網(wǎng)或非可信網(wǎng)絡(luò)中被截獲,集群管理員可以調(diào)整Hadoop組件相關(guān)配置,使用加密協(xié)議對數(shù)據(jù)傳輸通道加密。 在HDFS組件的配置界面中設(shè)置相關(guān)參數(shù)的值,設(shè)置后全局生效,即Hadoop中各模塊的RPC通道是否加密全部生效。
大數(shù)據(jù)優(yōu)化與提升服務(wù)單的有效期是多長? 一年。 父主題: 關(guān)于服務(wù)咨詢
恢復(fù)DBService元數(shù)據(jù) 操作場景 在用戶意外修改、刪除或需要找回數(shù)據(jù)時,系統(tǒng)管理員對DBService進行重大操作(如升級、重大數(shù)據(jù)調(diào)整等)后,系統(tǒng)數(shù)據(jù)出現(xiàn)異?;蛭催_到預(yù)期結(jié)果,模塊全部故障無法使用,或者遷移數(shù)據(jù)到新集群的場景中,需要對DBService進行恢復(fù)數(shù)據(jù)操作。
表1 支持的元數(shù)據(jù)連接類型 類別 連接類型 大數(shù)據(jù)組件 Hive Metastore Doris HBase ClickHouse Delta Lake(有元數(shù)據(jù)) Delta Lake(無元數(shù)據(jù)) Hudi(有元數(shù)據(jù)) Hudi(無元數(shù)據(jù)) 大數(shù)據(jù)云服務(wù) MaxCompute 阿里云云數(shù)據(jù)庫
大數(shù)據(jù)-HBase 用戶名/密鑰 非安全集群需要上傳core-site.xml,hdfs-site.xml,yarn-site.xml,mapred-site.xml和hbase-site.xml等5個文件。
· 金融行業(yè)在自主化、異構(gòu)計算、關(guān)鍵業(yè)務(wù)應(yīng)用向云原生和分布式架構(gòu)轉(zhuǎn)型、云上技術(shù)創(chuàng)新等需求驅(qū)動下保持高速增長。 · 數(shù)據(jù)要素、工業(yè)互聯(lián)網(wǎng)、企業(yè)集團云、人工智能等將是政企當(dāng)下智能轉(zhuǎn)型的核心需求。
恢復(fù)HDFS業(yè)務(wù)數(shù)據(jù) 操作場景 在用戶意外修改、刪除或需要找回數(shù)據(jù)時,系統(tǒng)管理員對HDFS進行重大操作(如升級、重大數(shù)據(jù)調(diào)整等)后,系統(tǒng)數(shù)據(jù)出現(xiàn)異常或未達到預(yù)期結(jié)果,模塊全部故障無法使用,或者遷移數(shù)據(jù)到新集群的場景中,需要對HDFS進行恢復(fù)數(shù)據(jù)操作。
恢復(fù)Hive業(yè)務(wù)數(shù)據(jù) 操作場景 在用戶意外修改、刪除或需要找回數(shù)據(jù)時,系統(tǒng)管理員對Hive進行重大操作(如升級、重大數(shù)據(jù)調(diào)整等)后,系統(tǒng)數(shù)據(jù)出現(xiàn)異?;蛭催_到預(yù)期結(jié)果,模塊全部故障無法使用,或者遷移數(shù)據(jù)到新集群的場景中,需要對Hive進行恢復(fù)數(shù)據(jù)操作。
態(tài)勢感知平臺應(yīng)用部署 前端應(yīng)用部署: 將前端包上傳至服務(wù)器 /usr/local/tsgz 修改配置文件進入config下修改配置文件 vim index.js 圖1 修改配置文件1 后端包的配置與修改共4個后端jar服務(wù)器包。
符合BDC 83-2021《大數(shù)據(jù) 圖計算平臺技術(shù)要求與測試方法》標(biāo)準(zhǔn)。
父主題: 大數(shù)據(jù)
MRS組件應(yīng)用開發(fā)簡介 MRS是企業(yè)級大數(shù)據(jù)存儲、查詢、分析的統(tǒng)一平臺,能夠幫助企業(yè)快速構(gòu)建海量數(shù)據(jù)信息處理系統(tǒng),通過對海量信息數(shù)據(jù)的分析挖掘,發(fā)現(xiàn)全新價值點和企業(yè)商機。
數(shù)據(jù)集成平臺應(yīng)用部署 將部署文件上傳到服務(wù)器/usr/local/下,解壓target4.0.tar tar -zxvf target4.0.tar 說明:需要java環(huán)境 檢查環(huán)境:java -vrsion 圖1 解壓 進入/usr/local/target4.0/bin下啟動服務(wù)
來自新華醫(yī)院的王偉業(yè)教授就“如何管理生物醫(yī)療領(lǐng)域的大數(shù)據(jù)”命題提出了自己建議:“對于高度碎片化、高度復(fù)雜化的大數(shù)據(jù),設(shè)計一個合理、統(tǒng)一的收集和索引方法,是利用好大數(shù)據(jù)平臺的首要條件。”同時,現(xiàn)場他還為大家分享了NCBI在生物實驗數(shù)據(jù)收集、使用和管理領(lǐng)域的寶貴經(jīng)驗。
圖3 調(diào)用API3 將sdk獲取到值x-authorization、x-sdk-date,填入到postman的header里,然后“send”獲取相應(yīng)的數(shù)據(jù)。 圖4 調(diào)用API4 父主題: 數(shù)據(jù)服務(wù)
父主題: 大數(shù)據(jù)
什么是數(shù)據(jù)安全中心 數(shù)據(jù)安全中心服務(wù)(Data Security Center,DSC)是新一代的云原生數(shù)據(jù)安全管理平臺,提供數(shù)據(jù)分級分類、數(shù)據(jù)脫敏、數(shù)據(jù)水印、API數(shù)據(jù)保護等基礎(chǔ)數(shù)據(jù)安全能力,通過資產(chǎn)地圖整體呈現(xiàn)云上數(shù)據(jù)安全態(tài)勢,實現(xiàn)一站式數(shù)據(jù)安全運營能力。
修訂記錄 表1 修訂記錄 發(fā)布日期 修訂記錄 2024-07-15 第一次正式發(fā)布。