檢測到您已登錄華為云國際站賬號，為了您更好的體驗，建議您訪問國際站服務網站 http://m.cqfng.cn/intl/zh-cn
不再顯示此消息
檢測到您已登錄華為云國際站賬號，為了您更好的體驗，建議您訪問國際站服務網站 http://m.cqfng.cn/intl/zh-cn
不再顯示此消息
lib=/usr/local/lib -Dbundle.zstd=true參數zstd.lib指向本地庫中zstd依賴，使用bundle.zstd表示開啟編譯zstd,如果本地zstd庫找不到，編譯會失敗。3. Hive orc格式設置ZSTD為默認壓縮算法。ORC-363(https://jira
Hive支持ZSTD壓縮格式 ZSTD（全稱為Zstandard）是一種開源的無損數據壓縮算法，其壓縮性能和壓縮比均優(yōu)于當前Hadoop支持的其他壓縮格式，本特性使得Hive支持ZSTD壓縮格式的表。Hive支持基于ZSTD壓縮的存儲格式有常見的ORC，RCFile，TextFi
檢查源路徑（文件）或目標路徑（文件）是否存在。 檢查文件類型是否正確，確保文件以正確的壓縮格式結尾。 啟用sudo權限或修改目錄文件權限屬性。 父主題： 解壓文件
解壓文件 沒有找到解壓文件 原生命令Compress-Archive打包時包含反斜杠“\” 執(zhí)行“解壓文件”步驟，關于部署應用中斷問題 執(zhí)行“解壓文件”步驟，關于權限不夠問題 執(zhí)行“解壓文件”步驟，關于參數含反斜杠“\”（特例）問題 執(zhí)行“解壓文件”步驟，日志提示“環(huán)境下沒有主機”怎樣處理？
創(chuàng)建ZSTD壓縮格式的Hive表 操作場景 文件壓縮可以減少儲存文件的空間，并且提高數據從磁盤讀取和網絡傳輸的速度，Hive支持創(chuàng)建表時配置SNAPPY、ZLIB、Gzip、Bzip2、ZSTD等壓縮格式。 ZSTD（全稱為Zstandard）是一種開源的無損數據壓縮算法，其壓縮
zstd壓縮算法有什么優(yōu)勢？ 問： zstd壓縮算法有什么優(yōu)勢？ 答： ZSTD（全稱為Zstandard）是一種開源的無損數據壓縮算法，其壓縮性能和壓縮比均優(yōu)于當前Hadoop支持的其他壓縮格式。 具體詳細請參考https://github.com/L-Angel/compress-demo。
使用ZSTD_JNI壓縮算法壓縮Hive ORC表 操作場景 ZSTD_JNI是ZSTD壓縮算法的native實現，相較于ZSTD而言，壓縮讀寫效率和壓縮率更優(yōu)，并允許用戶設置壓縮級別，以及對特定格式的數據列指定壓縮方式。 目前僅ORC格式的表支持ZSTD_JNI壓縮方式，而普通
-128。 環(huán)境 選擇當前資源類型為主機集群的環(huán)境，作為部署對象。 解壓文件 指定待解壓文件的路徑和解壓目錄。 控制選項 配置是否啟用以下操作。 失敗后繼續(xù)運行：當前步驟部署失敗后，應用繼續(xù)部署后續(xù)的步驟。 使用sudo權限執(zhí)行：配置使用sudo權限部署該步驟。 若在部署過程中遇
com/blogs/168931）已經介紹了zstd算法，以及從源碼開始安裝zstd庫方式；這里介紹一種使用EulerOS 2.x/centos7運行hadoop3/hbase2時，快速安裝zstd庫的方法。安裝直接從下面地址下載zstd庫的rpm文件https://download-ib01
使用LZC壓縮算法存儲HDFS文件 配置場景 文件壓縮可以減少存儲文件的空間，并且提高數據從磁盤讀取和網絡傳輸的速度。HDFS有Gzip和Snappy這兩種默認壓縮格式。本章節(jié)為HDFS新增加的壓縮格式LZC（Lempel-Ziv Compression）提供配置方法。
使用LZC壓縮算法存儲HDFS文件 配置場景 文件壓縮可以減少存儲文件的空間，并且提高數據從磁盤讀取和網絡傳輸的速度。HDFS有Gzip和Snappy這兩種默認壓縮格式。本章節(jié)為HDFS新增加的壓縮格式LZC（Lempel-Ziv Compression）提供配置方法。
文章目錄 簡介1. 文件的下載2. 將下載到文件保存到本地3. 文件壓縮4. 文件解壓5. 遞歸刪除文件6. 最終的測試 總結 簡介 文件的讀寫是日常開發(fā)中經常碰到的需求，熟練掌握文件的讀寫是每個Java開發(fā)者的基本功。本文將主要介紹常見的文件讀寫操作。 之前寫過一篇Java
執(zhí)行“解壓文件”步驟，關于參數含反斜杠“\”（特例）問題 問題現象 當部署主機相關的應用時，出現如下日志： 以路徑為例，有以下幾種常見現象： 輸入的路徑參數有“\b”特殊字符導致部署報錯，如下圖所示。 圖1 日志信息 輸入的路徑參數有“\f”特殊字符導致部署報錯，如下圖所示。 圖2
執(zhí)行“解壓文件”步驟，關于權限不夠問題 問題現象 部署主機相關的應用時，出現“權限不夠”日志提示時，說明當前用戶對當前文件或文件夾沒有操作權限。 原因分析 當前用戶對當前文件或文件夾沒有操作權限。 處理方法 采用對當前用戶可以訪問的文件。 使用權限更高的用戶，如：root。 給當
HiLens Studio中如何解壓縮文件？ HiLens Studio基于Linux系統(tǒng)，使用Linux解壓縮命令即可實現解壓縮文件。 父主題： HiLens Studio使用
執(zhí)行“解壓文件”步驟，路徑不合法問題 問題現象 日志信息提示非法路徑。 原因分析 輸入的路徑有誤。 處理方法 檢查輸入的路徑是否正確，路徑中不能出現“\”。 父主題： 解壓文件
執(zhí)行“解壓文件”步驟，關于使用sudo權限執(zhí)行報錯問題 問題現象 部署主機相關應用時，選擇“使用sudo權限執(zhí)行”，出現“需要密碼”報錯。 原因分析 當前用戶選擇了“使用sudo權限執(zhí)行”選項，但是在Linux系統(tǒng)的/etc/sudoers文件中并未對當前用戶設置免密配置。 處理方法
執(zhí)行“解壓文件”步驟，日志提示“找不到環(huán)境”怎樣處理？ 問題現象 日志信息提示獲取環(huán)境失敗，找不到環(huán)境。 原因分析 引用的環(huán)境不存在或者被刪除。 處理方法 選擇目標應用，單擊圖標，單擊“編輯”，進入“部署步驟”頁面。 單擊“環(huán)境管理”，切換到“環(huán)境管理”頁面。 單擊“新建環(huán)境”，
執(zhí)行“解壓文件”步驟，關于windows主機部署應用失敗問題 問題現象 日志信息提示如下圖所示。 圖1 日志信息 原因分析 由于windows主機連通性驗證時，缺失指定補丁包導致。 處理方法 按照windows配置文檔重新進行連通性驗證 。 父主題： 解壓文件
執(zhí)行“解壓文件”步驟，日志提示“環(huán)境下沒有主機”怎樣處理？ 問題現象 日志信息提示獲取主機失敗，環(huán)境下沒有主機。 原因分析 環(huán)境里面沒有主機導致的錯誤。 處理方法 選擇目標應用，單擊圖標，單擊“編輯”，進入“部署步驟”頁面。 單擊“環(huán)境管理”，切換到“環(huán)境管理”頁面。 單擊目標環(huán)
執(zhí)行“解壓文件”步驟，關于部署應用中斷問題 問題現象 當部署主機相關的應用時，出現如下日志： 問題分析 由于主機中 /etc/ssh/sshd_config 配置文件中對服務器與客戶端交互的活動心跳時間做出了限制，所以在一個Ansible應用中如果在“規(guī)定時間”中主機沒有任何響應
上傳文件或文件夾 上傳文件操作可將本地文件或文件夾存儲至OBS，對象的存儲類別默認與桶的存儲類別一致。 背景信息 OBS Browser+使用分段上傳功能上傳文件。通過分段上傳功能，OBS Browser+支持上傳最大為48.8TB的單個文件。 文件或文件夾名稱長度不能超過102
