華為云ModelArts 系統(tǒng)pip源約束申明公告

2025-05-12

尊敬的華為云客戶：

當(dāng)您使用華為云ModelArts平臺創(chuàng)建分布式訓(xùn)練作業(yè)時，如果您使用的節(jié)點數(shù)超過10個，系統(tǒng)將自動清除默認(rèn)的pip源配置。該措施旨在避免訓(xùn)練過程中因多個節(jié)點同時訪問pip 源，可能引發(fā)的網(wǎng)絡(luò)瓶頸或依賴安裝失敗，確保訓(xùn)練作業(yè)的順利進(jìn)行。 

【約束覆蓋范圍】

覆蓋區(qū)域：華為云全部Region。

【約束影響】

在您使用華為云ModelArts平臺在創(chuàng)建分布式訓(xùn)練作業(yè)時，如果您使用的節(jié)點數(shù)超過10個，系統(tǒng)將自動清除默認(rèn)的pip源配置，當(dāng)訓(xùn)練過程中涉及pip install操作時可能會訓(xùn)練失敗。

建議在創(chuàng)建分布式訓(xùn)練作業(yè)時，提前安裝所有的Python依賴，以此避免因節(jié)點數(shù)過多導(dǎo)致pip源配置被刪除而引發(fā)訓(xùn)練失敗，提升訓(xùn)練作業(yè)的穩(wěn)定性和效率。

【常見問題】

如何避免系統(tǒng)自動刪除pip源配置帶來的影響：

為了避免每次作業(yè)啟動時進(jìn)行pip install，您可以在開發(fā)環(huán)境中提前打開鏡像，并通過pip install安裝好所有所需的依賴包。安裝完成后，保存該鏡像或者直接修改本地的Dockerfile來確保每次使用該鏡像時依賴已經(jīng)安裝好。

如您有任何問題，可隨時通過工單或者服務(wù)熱線（4000-955-988或950808）與我們聯(lián)系。

感謝您對華為云的支持！