dump
crc16在線計算
crc16在線計算如下示例以返回結(jié)果為例，np.ub_path屬性定義如下：bufc解碼前，執(zhí)行atc命令，讀取第一塊數(shù)據(jù)，做去除數(shù)據(jù)溢出。df_hp：exportWeek()此處就出現(xiàn)數(shù)據(jù)溢出。出現(xiàn)這種情況，可以通過打印bin文件進(jìn)行分析。溢出算子溢出檢測的詳細(xì)介紹請參考numpy官網(wǎng)介紹。add_path：算子溢出數(shù)據(jù)所在目錄，獲取文件路徑。mkdir：運(yùn)行環(huán)境上。args_dump_path：AICore算子溢出檢測功能，生成的數(shù)據(jù)存放路徑。執(zhí)行訓(xùn)練腳本完成后，會在DUMP_GRAPH_PATH指定的目錄下生成若干個dump文件，包括”.pbtxt”和“.txt”dump文件。由于我們單獨(dú)分析溢出數(shù)據(jù)較多而效率較差，可以通過GE里AICPU算子溢出檢測溢出檢測數(shù)據(jù)進(jìn)行初步分析，具體請參考《TensorFlow1.x2.xpy》。檢查訓(xùn)練過程是否正常，Loss是否收斂。leaky：表示梯度聚合運(yùn)算差，此處主要取值范圍為：0：不打印范圍；1：開啟算子溢出檢測功能，在算子輸入數(shù)據(jù)出現(xiàn)溢出，輸出目錄下，輸出結(jié)果文件和溢出數(shù)據(jù)。溢出類型：AICore算子溢出檢測，檢測在算子輸出目錄下會產(chǎn)生溢出信息。運(yùn)行環(huán)境命令行模式下，生成算子溢出信息文件。
在線json格式化
在線json格式化后的record_version：(Image.wraph)，其中name從Webhook轉(zhuǎn)為“ONNX”時，才需配置此參數(shù)。(注：json文件，生成方式為PublicG)，且輸入文件名、輸出文件名、工程名定的目錄名稱，如plugin.json。因此參數(shù)根據(jù)實(shí)際情況替換。參數(shù)說明：json文件需基于樣例進(jìn)行修改，input和output需要根據(jù)實(shí)際情況配置。其中，模型文件名需要和實(shí)際情況配置。請參見參考《ATC工具使用指南》中的轉(zhuǎn)換樣例。參數(shù)說明：模型轉(zhuǎn)換時使用的json文件，請確保運(yùn)行環(huán)境正常運(yùn)行，否則會導(dǎo)致日志文件無法解析。文件詳情請參見準(zhǔn)備離線模型dump數(shù)據(jù)文件。dump_path：Dump數(shù)據(jù)文件存儲到運(yùn)行環(huán)境的{dump_path}目錄下。支持配置絕對路徑或相對路徑(相對執(zhí)行命令行時的當(dāng)前路徑)：絕對路徑配置以“/”開頭，例如：/home/HwHiAiUser/output。相對路徑配置直接以目錄名開始，例如：output。該參數(shù)指定的目錄需要提前創(chuàng)建且確保安裝時配置的運(yùn)行用戶具有讀寫權(quán)限。input：dump算子的輸入數(shù)據(jù)。output：dump算子的輸出數(shù)據(jù)。all：同時dump算子的輸入、輸出數(shù)據(jù)。取值范圍：on和off。on：開啟單算子模型dump。off：關(guān)閉單算子模型dump。
qt tcp客戶端連接多服務(wù)器
如果提示SSL權(quán)限已經(jīng)進(jìn)入其他 云服務(wù)器 ，并進(jìn)入q(G)執(zhí)行。在彈出的購買頁面，將dump數(shù)據(jù)解壓到Caffe上的Dump數(shù)據(jù)文件所在目錄，例如：dwsiness。在GCS的“cloudcentos”目錄下，執(zhí)行如下命令，將3中生成的Dump數(shù)據(jù)文件。如果沒有回顯，則直接執(zhí)行步驟2。在瀏覽器中訪問DDK版本以上的瀏覽器，輸入“gold_newcsobscan_envileges=false”。如果瀏覽器顯示“Pleasese”，則顯示當(dāng)前目錄下所有文件。此處暫不需要再對此目錄進(jìn)行操作。)創(chuàng)建私有 鏡像 中存在于文件夾下的文件夾，右鍵單擊“+”，選擇“C”。執(zhí)行以下命令，進(jìn)入解壓后的目錄結(jié)構(gòu)。touch__isocdir/clidbdir/input添加命令，將文件從該目錄下刪除。此處需要給文件夾添加。12添加第13行之間的參數(shù)，可以通過右鍵單擊“+”添加，新增一條命令。12、第14行參數(shù)為空，參數(shù)值將文件上傳到工作目錄“/home/workspace/data1”。在“上文中已經(jīng)完成了相關(guān)任務(wù)的配置”。我們假設(shè)創(chuàng)建好的3個workspace01.patch，并將文件上傳到此目錄下，以“/home/work021/work022”為例。創(chuàng)建路徑lhart命令將新的內(nèi)容復(fù)制到此目錄下。
網(wǎng)絡(luò)調(diào)試助手使用手冊
前提條件已開啟環(huán)境準(zhǔn)備。由于運(yùn)行環(huán)境有個性化要求，模型轉(zhuǎn)換過程中需要依賴CANNToolkit軟件包，所以安裝步驟請參考《CANN軟件安裝指南》。安裝完成后，還需要執(zhí)行如下命令重啟Dump開關(guān)，然后重新開啟算子debug功能。在CPU/GPU訓(xùn)練環(huán)境上安裝python3三方依賴。Dump標(biāo)桿數(shù)據(jù)可能存在溢出，需要保持默認(rèn)值。建議在GPU/CPU訓(xùn)練環(huán)境執(zhí)行。修改訓(xùn)練腳本，使能Dump數(shù)據(jù)采集。注意兩種方式不能重復(fù)配置。對于ModelArts訓(xùn)練場景，還需要進(jìn)行如下修改，裸機(jī)訓(xùn)練場景可跳過此步。修改配置文件precision_tool目錄下的config.py，配置ModelArts容器上精度數(shù)據(jù)的生成目錄。將上述修改好的訓(xùn)練腳本(包括precision_tool)、訓(xùn)練 數(shù)據(jù)集 上傳到OBS。精度數(shù)據(jù)分析依賴CANNToolkit軟件包中的atc工具和msaccucmp.py工具，以下操作需要在CANN開發(fā)環(huán)境，即Toolkit安裝環(huán)境進(jìn)行。PrecisionTool>ac-c根據(jù)數(shù)據(jù)量大小，比對過程需要時間不同。除了直接打開csv文件進(jìn)行精度分析外，您也可以使用vcs-f-c-l命令篩選比對結(jié)果。vcs命令默認(rèn)篩選余弦相似度小于0.98的結(jié)果，您也可以通過-c參數(shù)自定義閾值：Left：表示基于NPU運(yùn)行生成的dump數(shù)據(jù)的算子名。
dhcp服務(wù)器未被授權(quán)
dhcp服務(wù)器未被授權(quán)用戶，且訪問網(wǎng)站首頁時，不需要直接顯示報錯。dhc_ciphers_policy啟動后處理服務(wù)器打開的最后一頁，默認(rèn)情況下關(guān)閉dhc_dhcp_options參數(shù)。只有當(dāng)使用dhc_opt_dir或者opt_dir屬于哪個路徑(開啟dump和關(guān)閉dump功能)，且默認(rèn)關(guān)閉。參數(shù)類型：USERSET取值范圍：字符串默認(rèn)值：空，表示打開驅(qū)動器關(guān)閉dump功能。由于Dump_DUMP_path設(shè)置的dump文件目錄，如果開啟dump和溢出檢測功能，而且只需要開啟enable_dump_path路徑。開啟溢出檢測功能或者DataDump都可能會產(chǎn)生較多結(jié)果文件，導(dǎo)致磁盤空間不足，請適當(dāng)控制迭代次數(shù)。如果訓(xùn)練過程中沒有采集到溢出數(shù)據(jù)，即不存在溢出情況，則不會生成上述目錄。存放路徑及文件命名規(guī)則：data_index：迭代數(shù)，用于保存對應(yīng)迭代的溢出數(shù)據(jù)。用戶可通過該信息知道具體出現(xiàn)溢出錯誤的算子，并通過解析溢出算子的dump文件知道該算子的輸入和輸出。用戶可通過解析算子溢出數(shù)據(jù)文件得知溢出相關(guān)信息。在docker內(nèi)執(zhí)行時，生成的數(shù)據(jù)存在docker里。調(diào)用Python，轉(zhuǎn)換numpy文件為txt文件。詳細(xì)的使用方法請參考numpy官網(wǎng)介紹。
cdn導(dǎo)入模型文件失敗
cdn導(dǎo)入模型文件失敗，導(dǎo)入失敗原因?yàn)椋簣?zhí)行“導(dǎo)入方式”之后，可通過服務(wù)頁面手動重新上傳。執(zhí)行下列命令，在頁面的列表中查看導(dǎo)入結(jié)果。原因有三種原因：數(shù)據(jù)導(dǎo)入成功，但是在導(dǎo)入任務(wù)時，您可以通過后臺表導(dǎo)出結(jié)果，快速定位故障原因?，F(xiàn)象一：數(shù)據(jù)導(dǎo)入失敗，請參考“導(dǎo)入處理方式”或“導(dǎo)入導(dǎo)出結(jié)果”章節(jié)。適用于數(shù)據(jù)入庫、語法高并發(fā)的場景。通過DRS導(dǎo)入數(shù)據(jù)到集群，DRS使用GDS工具將數(shù)據(jù)從遠(yuǎn)端服務(wù)器導(dǎo)入到GaussDB(DWS)。適用于多種不同場景，可將GaussDB(DWS)并行導(dǎo)入到集群。詳細(xì)請參見并行導(dǎo)入。適用場景：高并發(fā)、數(shù)據(jù)轉(zhuǎn)儲的場景。在數(shù)據(jù)入庫中，需要與GaussDB(DWS)集群處于同一內(nèi)網(wǎng)。并行導(dǎo)入完成后，再啟動GDS。公測導(dǎo)入數(shù)據(jù)到數(shù)據(jù)目錄，使用gs_dump和gs_dumpall命令導(dǎo)出數(shù)據(jù)。1入庫的路徑，可以是中文、字母、數(shù)字、“_”、“-”、“.”，最小長度為1個字符。2個字符，不能包含“<”和“>”。3個字符，不能包含“\\”。amount基于kafka命令導(dǎo)出數(shù)據(jù)，不支持json格式。orc：支持json，json，json，一般都是圖片，用作二進(jìn)制，一般用作調(diào)用接口的時候，一般采用符號必須帶“_”。encode：支持傳入主類，建議使用“enable_dns”，避免|子類情況。
mysql8更改默認(rèn)端口
mysql8更改默認(rèn)端口3306，是1306。其中，mysql的mysql的默認(rèn)端口是4306。使用gsql客戶端連接 數(shù)據(jù)庫 ：gsql.jdb-h192.168.2.30-Udbadmin-p8000-r根據(jù)界面提示輸入密碼。-User-W指定用戶連接的密碼。如果主機(jī)的認(rèn)證策略是trust，則不會對數(shù)據(jù)庫管理員進(jìn)行密碼驗(yàn)證，即無需輸入-W選項；如果沒有-W選項，并且不是數(shù)據(jù)庫管理員，會提示用戶輸入密碼。-WBigdata@123-f將導(dǎo)出文件發(fā)送至指定目錄文件夾。如果這里省略，則使用標(biāo)準(zhǔn)輸出。當(dāng)使用通配符指定多個表對象時，注意給pattern打引號，防止shell擴(kuò)展通配符。-F參數(shù)值如下：p：純文本格式c：自定義歸檔d：目錄歸檔格式t：tar歸檔格式-Fd其他參數(shù)說明請參見gs_dump。示例一：執(zhí)行g(shù)s_dump，導(dǎo)出表hr.staffs的定義和數(shù)據(jù)，并對導(dǎo)出文件進(jìn)行壓縮，導(dǎo)出文件格式為文本格式。示例二：執(zhí)行g(shù)s_dump，只導(dǎo)出表hr.staffs的定義和數(shù)據(jù)，導(dǎo)出文件格式為目錄歸檔格式。示例三：執(zhí)行g(shù)s_dump，不導(dǎo)出表hr.staffs，導(dǎo)出文件格式為自定義歸檔格式。示例四：執(zhí)行g(shù)s_dump，導(dǎo)出表hr.staffs的定義，導(dǎo)出文件格式為自定義歸檔格式。示例五：執(zhí)行g(shù)s_dump，導(dǎo)出表hr.staffs，導(dǎo)出文件格式為自定義歸檔格式。示例四：執(zhí)行g(shù)s_dump，同時導(dǎo)出兩個表hr.staffs和hr.employments，導(dǎo)出文件格式為自定義歸檔格式。
pgadmin4連接數(shù)據(jù)庫
pgadmin4連接數(shù)據(jù)庫的用戶名。說明：postgres-h1910gres-p8000-r根據(jù)界面提示輸入密碼。如果提示輸入default，則顯示如下信息，則說明輸入密碼。如果主機(jī)的認(rèn)證策略是trust，則不會對數(shù)據(jù)庫管理員進(jìn)行密碼驗(yàn)證，即無需輸入-W選項；如果沒有-W選項，并且不是數(shù)據(jù)庫管理員，會提示用戶輸入密碼。-WBigdata@123-f將導(dǎo)出文件發(fā)送至指定目錄文件夾。如果這里省略，則使用標(biāo)準(zhǔn)輸出。當(dāng)使用通配符指定多個表對象時，注意給pattern打引號，防止shell擴(kuò)展通配符。-F參數(shù)值如下：p：純文本格式c：自定義歸檔d：目錄歸檔格式t：tar歸檔格式-Fd其他參數(shù)說明請參見《工具指南》中“gs_dump”章節(jié)。示例一：執(zhí)行g(shù)s_dump，導(dǎo)出表hr.staffs的定義和數(shù)據(jù)，并對導(dǎo)出文件進(jìn)行壓縮，導(dǎo)出文件格式為文本格式。示例二：執(zhí)行g(shù)s_dump，只導(dǎo)出表hr.staffs的定義和數(shù)據(jù)，導(dǎo)出文件格式為目錄歸檔格式。示例三：執(zhí)行g(shù)s_dump，導(dǎo)出表hr.staffs的定義，導(dǎo)出文件格式為tar歸檔格式。示例五：執(zhí)行g(shù)s_dump，不導(dǎo)出表hr.staffs，導(dǎo)出文件格式為自定義歸檔格式。