什么是云日志服務(wù) LTS
云日志服務(wù) LTS基本概念
日志租、日志流、ICAgent
日志組
日志組(LogGroup)是云日志服務(wù)進(jìn)行日志管理的基本單位,可以創(chuàng)建日志流以及設(shè)置日志存儲時間。
日志組的創(chuàng)建類型分為用戶創(chuàng)建(主動)和云服務(wù)創(chuàng)建(被動)。
用戶創(chuàng)建:用戶在云日志服務(wù)控制臺進(jìn)行創(chuàng)建的日志組。
1、云服務(wù)創(chuàng)建:指華為云其他云服務(wù)與云日志服務(wù)進(jìn)行系統(tǒng)對接后
2、系統(tǒng)將自動在云日志服務(wù)控制臺創(chuàng)建日志組和日志流,云服務(wù)的運(yùn)行日志將發(fā)送到對應(yīng)的日志流中。
日志流
日志流(LogStream)是日志讀寫的基本單位,日志組中可以創(chuàng)建日志流,方便對日志進(jìn)一步分類管理。
日志讀寫以日志流為單位,您可以在寫入時指定日志流,將不同類型的日志分類存儲,ICAgent采集日志后,將多條日志數(shù)據(jù)進(jìn)行打包,以日志流為單位發(fā)往云日志服務(wù),日志流的讀寫方式可以最大限度地減少讀取與寫入次數(shù),提高業(yè)務(wù)效率。
ICAgent
ICAgent是云日志服務(wù)的日志采集工具,運(yùn)行在需要采集日志的主機(jī)中。首次使用云日志服務(wù)采集日志時,需要安裝ICAgent,如果需要采集多臺主機(jī)的日志,還支持批量安裝ICAgent,在云日志服務(wù)控制臺可以實(shí)時查看ICAgent的運(yùn)行狀態(tài)。
云日志服務(wù) LTS基本功能
-
實(shí)時采集日志
云日志服務(wù)提供實(shí)時日志采集功能,采集到的日志數(shù)據(jù)可以在云日志控制臺以簡單有序的方式展示、方便快捷的方式進(jìn)行查詢,并且可以長期存儲。
采集到日志數(shù)據(jù)按照結(jié)構(gòu)化和非結(jié)構(gòu)化進(jìn)行分析。結(jié)構(gòu)化日志是通過規(guī)則將日志流中的日志進(jìn)行處理,提取出來有固定格式或者相似度高的日志內(nèi)容做結(jié)構(gòu)化的分類。這樣就可以采用SQL的語法進(jìn)行日志的查詢。
云日志服務(wù)提供實(shí)時日志采集功能,采集到的日志數(shù)據(jù)可以在云日志控制臺以簡單有序的方式展示、方便快捷的方式進(jìn)行查詢,并且可以長期存儲。
采集到日志數(shù)據(jù)按照結(jié)構(gòu)化和非結(jié)構(gòu)化進(jìn)行分析。結(jié)構(gòu)化日志是通過規(guī)則將日志流中的日志進(jìn)行處理,提取出來有固定格式或者相似度高的日志內(nèi)容做結(jié)構(gòu)化的分類。這樣就可以采用SQL的語法進(jìn)行日志的查詢。
-
日志轉(zhuǎn)儲
主機(jī)和云服務(wù)的日志數(shù)據(jù)上報至云日志服務(wù)后,默認(rèn)存儲時間為7天,可以在1-30天之間進(jìn)行設(shè)置。超出存儲時間的日志數(shù)據(jù)將會被自動刪除,對于需要長期存儲的日志數(shù)據(jù)(日志持久化),云日志服務(wù)提供轉(zhuǎn)儲功能,可以將日志轉(zhuǎn)儲至對象存儲服務(wù)(OBS)、數(shù)據(jù)接入服務(wù)(DIS)中長期保存。日志轉(zhuǎn)儲基于復(fù)制的轉(zhuǎn)儲機(jī)制,在LTS設(shè)置的存儲時間內(nèi)轉(zhuǎn)儲至OBS的日志,不會在LTS被刪除。
主機(jī)和云服務(wù)的日志數(shù)據(jù)上報至云日志服務(wù)后,默認(rèn)存儲時間為7天,可以在1-30天之間進(jìn)行設(shè)置。超出存儲時間的日志數(shù)據(jù)將會被自動刪除,對于需要長期存儲的日志數(shù)據(jù)(日志持久化),云日志服務(wù)提供轉(zhuǎn)儲功能,可以將日志轉(zhuǎn)儲至對象存儲服務(wù)(OBS)、數(shù)據(jù)接入服務(wù)(DIS)中長期保存。日志轉(zhuǎn)儲基于復(fù)制的轉(zhuǎn)儲機(jī)制,在LTS設(shè)置的存儲時間內(nèi)轉(zhuǎn)儲至OBS的日志,不會在LTS被刪除。
-
日志查詢與實(shí)時分析
對采集的日志數(shù)據(jù),可以通過關(guān)鍵字查詢、模糊查詢等方式簡單快速地進(jìn)行查詢,適用于日志實(shí)時數(shù)據(jù)分析、安全診斷與分析、運(yùn)營與客服系統(tǒng)等,例如云服務(wù)的訪問量、點(diǎn)擊量等,通過日志數(shù)據(jù)分析,可以輸出詳細(xì)的運(yùn)營數(shù)據(jù)。
對采集的日志數(shù)據(jù),可以通過關(guān)鍵字查詢、模糊查詢等方式簡單快速地進(jìn)行查詢,適用于日志實(shí)時數(shù)據(jù)分析、安全診斷與分析、運(yùn)營與客服系統(tǒng)等,例如云服務(wù)的訪問量、點(diǎn)擊量等,通過日志數(shù)據(jù)分析,可以輸出詳細(xì)的運(yùn)營數(shù)據(jù)。
-
日志監(jiān)控與告警
云日志服務(wù)結(jié)合應(yīng)用運(yùn)維管理(Application Operations Management,簡稱AOM),支持對存儲在云日志服務(wù)中的日志數(shù)據(jù)進(jìn)行關(guān)鍵詞統(tǒng)計,通過在一定時間段內(nèi)日志中關(guān)鍵字出現(xiàn)次數(shù),實(shí)時監(jiān)控服務(wù)運(yùn)行狀態(tài)。
云日志服務(wù)結(jié)合應(yīng)用運(yùn)維管理(Application Operations Management,簡稱AOM),支持對存儲在云日志服務(wù)中的日志數(shù)據(jù)進(jìn)行關(guān)鍵詞統(tǒng)計,通過在一定時間段內(nèi)日志中關(guān)鍵字出現(xiàn)次數(shù),實(shí)時監(jiān)控服務(wù)運(yùn)行狀態(tài)。
云日志服務(wù) LTS應(yīng)用場景
日志采集與分析、合理優(yōu)化業(yè)務(wù)性能、快速定位網(wǎng)絡(luò)故障
日志采集與分析
主機(jī)和云服務(wù)的日志數(shù)據(jù),不方便查閱并且會定期清空。云日志服務(wù)采集日志后,日志數(shù)據(jù)可以在云日志控制臺以簡單有序的方式展示、方便快捷的方式進(jìn)行查詢,并且可以長期存儲。對采集的日志數(shù)據(jù),可以通過關(guān)鍵字查詢、模糊查詢等方式簡單快速地進(jìn)行查詢,適用于日志實(shí)時數(shù)據(jù)分析、安全診斷與分析、運(yùn)營與客服系統(tǒng)等,例如云服務(wù)的訪問量、點(diǎn)擊量等,通過日志數(shù)據(jù)分析,可以輸出詳細(xì)的運(yùn)營數(shù)據(jù)。
合理優(yōu)化業(yè)務(wù)性能
網(wǎng)站服務(wù)(數(shù)據(jù)庫、網(wǎng)絡(luò)等)的性能和服務(wù)質(zhì)量是衡量用戶滿意度的關(guān)鍵指標(biāo),通過用戶的擁塞記錄日志發(fā)現(xiàn)站點(diǎn)的性能瓶頸,以提示站點(diǎn)管理者改進(jìn)網(wǎng)站緩存策略、網(wǎng)絡(luò)傳輸策略等,合理優(yōu)化業(yè)務(wù)性能。例如:
1、分析歷史網(wǎng)站數(shù)據(jù),構(gòu)建業(yè)務(wù)網(wǎng)絡(luò)基準(zhǔn)。
2、及時發(fā)現(xiàn)業(yè)務(wù)性能瓶頸,合理擴(kuò)容或流量下調(diào)。
3、分析網(wǎng)絡(luò)流量,優(yōu)化網(wǎng)絡(luò)安全策略。
快速定位網(wǎng)絡(luò)故障
網(wǎng)絡(luò)質(zhì)量是業(yè)務(wù)穩(wěn)定的基石,將日志上報至云日志服務(wù),確保問題發(fā)生時能及時查看、定位問題,助力您快速定位網(wǎng)絡(luò)故障,進(jìn)行網(wǎng)絡(luò)回溯取證。例如:
1、快速定位問題根源的云服務(wù)器,例如帶寬過度使用的云服務(wù)器
2、過分析訪問日志,判斷業(yè)務(wù)是否遭到了攻擊、非法盜鏈和不良請求等,及時定位并解決問題。
云日志服務(wù) LTS相關(guān)教程
云日志服務(wù) LTS
03:36
云日志服務(wù) LTS
02:33
云日志服務(wù) LTS
04:52