4步快速使用MapReduce服務(wù)
4步快速使用MapReduce服務(wù)
上傳數(shù)據(jù)
如果您沒有購買集群,請上傳程序和數(shù)據(jù)到對象存儲服務(wù)(OBS)中;如果您已經(jīng)購買了集群,請上傳程序和數(shù)據(jù)到HDFS。
購買集群
進入MapReduce管理控制臺,單擊“購買集群”并配置相關(guān)參數(shù)。用戶可以指定集群類型用于離線數(shù)據(jù)分析和流處理任務(wù),指定集群中預(yù)置的彈性云服務(wù)器實例規(guī)格、實例數(shù)量、數(shù)據(jù)盤類型、要安裝的組件。
提交作業(yè)
您可以通過MRS控制臺界面提交作業(yè),也可以通過MRS集群節(jié)點使用命令提交作業(yè)。
查看作業(yè)執(zhí)行結(jié)果
可在每個集群的“作業(yè)管理”頁簽查看作業(yè)運行記錄和查詢結(jié)果或者下載分析結(jié)果。也可以將結(jié)果轉(zhuǎn)儲到用戶OBS上,轉(zhuǎn)儲成功后,使用OBS工具下載文件,查看結(jié)果。
視頻教程帶您了解MapReduce服務(wù) MRS
視頻教程帶您了解MapReduce服務(wù) MRS
MRS集群操作指導(dǎo)
MRS修改服務(wù)配置參數(shù)指導(dǎo)
MRS二次開發(fā)配置和導(dǎo)入樣例工程指導(dǎo)
沙箱實驗室
沙箱實驗室
MRS基礎(chǔ)入門實踐
該實驗旨在指導(dǎo)用戶短時間內(nèi)熟悉并利用云原生數(shù)據(jù)湖MapReduce服務(wù)提供租戶完全可控的企業(yè)級大數(shù)據(jù)集群云服務(wù)。
基于Spark實現(xiàn)車主駕駛行為分析
通過MRS服務(wù)Spark組件分析統(tǒng)計指定時間內(nèi),車主急加速、急剎車、空擋滑行、超速等違法行為的次數(shù)。
MRS基礎(chǔ)組件之 HDFS與MapReduce開發(fā)與應(yīng)用
本實驗基于MRS環(huán)境,通過介紹如何利用HDFS和MapReduce的常用JAVA API來進行相關(guān)操作。