什么是云日志服務(wù) LTS
云日志服務(wù) LTS基本概念
日志租、日志流、ICAgent
日志組
日志組(LogGroup)是云日志服務(wù)進(jìn)行日志管理的基本單位,可以創(chuàng)建日志流以及設(shè)置日志存儲(chǔ)時(shí)間。
日志組的創(chuàng)建類型分為用戶創(chuàng)建(主動(dòng))和云服務(wù)創(chuàng)建(被動(dòng))。
用戶創(chuàng)建:用戶在云日志服務(wù)控制臺(tái)進(jìn)行創(chuàng)建的日志組。
1、云服務(wù)創(chuàng)建:指華為云其他云服務(wù)與云日志服務(wù)進(jìn)行系統(tǒng)對(duì)接后
2、系統(tǒng)將自動(dòng)在云日志服務(wù)控制臺(tái)創(chuàng)建日志組和日志流,云服務(wù)的運(yùn)行日志將發(fā)送到對(duì)應(yīng)的日志流中。
日志流
日志流(LogStream)是日志讀寫的基本單位,日志組中可以創(chuàng)建日志流,方便對(duì)日志進(jìn)一步分類管理。
日志讀寫以日志流為單位,您可以在寫入時(shí)指定日志流,將不同類型的日志分類存儲(chǔ),ICAgent采集日志后,將多條日志數(shù)據(jù)進(jìn)行打包,以日志流為單位發(fā)往云日志服務(wù),日志流的讀寫方式可以最大限度地減少讀取與寫入次數(shù),提高業(yè)務(wù)效率。
ICAgent
ICAgent是云日志服務(wù)的日志采集工具,運(yùn)行在需要采集日志的主機(jī)中。首次使用云日志服務(wù)采集日志時(shí),需要安裝ICAgent,如果需要采集多臺(tái)主機(jī)的日志,還支持批量安裝ICAgent,在云日志服務(wù)控制臺(tái)可以實(shí)時(shí)查看ICAgent的運(yùn)行狀態(tài)。
云日志服務(wù) LTS基本功能
-
實(shí)時(shí)采集日志
云日志服務(wù)提供實(shí)時(shí)日志采集功能,采集到的日志數(shù)據(jù)可以在云日志控制臺(tái)以簡(jiǎn)單有序的方式展示、方便快捷的方式進(jìn)行查詢,并且可以長(zhǎng)期存儲(chǔ)。
采集到日志數(shù)據(jù)按照結(jié)構(gòu)化和非結(jié)構(gòu)化進(jìn)行分析。結(jié)構(gòu)化日志是通過規(guī)則將日志流中的日志進(jìn)行處理,提取出來有固定格式或者相似度高的日志內(nèi)容做結(jié)構(gòu)化的分類。這樣就可以采用SQL的語法進(jìn)行日志的查詢。
云日志服務(wù)提供實(shí)時(shí)日志采集功能,采集到的日志數(shù)據(jù)可以在云日志控制臺(tái)以簡(jiǎn)單有序的方式展示、方便快捷的方式進(jìn)行查詢,并且可以長(zhǎng)期存儲(chǔ)。
采集到日志數(shù)據(jù)按照結(jié)構(gòu)化和非結(jié)構(gòu)化進(jìn)行分析。結(jié)構(gòu)化日志是通過規(guī)則將日志流中的日志進(jìn)行處理,提取出來有固定格式或者相似度高的日志內(nèi)容做結(jié)構(gòu)化的分類。這樣就可以采用SQL的語法進(jìn)行日志的查詢。
-
日志轉(zhuǎn)儲(chǔ)
主機(jī)和云服務(wù)的日志數(shù)據(jù)上報(bào)至云日志服務(wù)后,默認(rèn)存儲(chǔ)時(shí)間為7天,可以在1-30天之間進(jìn)行設(shè)置。超出存儲(chǔ)時(shí)間的日志數(shù)據(jù)將會(huì)被自動(dòng)刪除,對(duì)于需要長(zhǎng)期存儲(chǔ)的日志數(shù)據(jù)(日志持久化),云日志服務(wù)提供轉(zhuǎn)儲(chǔ)功能,可以將日志轉(zhuǎn)儲(chǔ)至對(duì)象存儲(chǔ)服務(wù)(OBS)、數(shù)據(jù)接入服務(wù)(DIS)中長(zhǎng)期保存。日志轉(zhuǎn)儲(chǔ)基于復(fù)制的轉(zhuǎn)儲(chǔ)機(jī)制,在LTS設(shè)置的存儲(chǔ)時(shí)間內(nèi)轉(zhuǎn)儲(chǔ)至OBS的日志,不會(huì)在LTS被刪除。
主機(jī)和云服務(wù)的日志數(shù)據(jù)上報(bào)至云日志服務(wù)后,默認(rèn)存儲(chǔ)時(shí)間為7天,可以在1-30天之間進(jìn)行設(shè)置。超出存儲(chǔ)時(shí)間的日志數(shù)據(jù)將會(huì)被自動(dòng)刪除,對(duì)于需要長(zhǎng)期存儲(chǔ)的日志數(shù)據(jù)(日志持久化),云日志服務(wù)提供轉(zhuǎn)儲(chǔ)功能,可以將日志轉(zhuǎn)儲(chǔ)至對(duì)象存儲(chǔ)服務(wù)(OBS)、數(shù)據(jù)接入服務(wù)(DIS)中長(zhǎng)期保存。日志轉(zhuǎn)儲(chǔ)基于復(fù)制的轉(zhuǎn)儲(chǔ)機(jī)制,在LTS設(shè)置的存儲(chǔ)時(shí)間內(nèi)轉(zhuǎn)儲(chǔ)至OBS的日志,不會(huì)在LTS被刪除。
-
日志查詢與實(shí)時(shí)分析
對(duì)采集的日志數(shù)據(jù),可以通過關(guān)鍵字查詢、模糊查詢等方式簡(jiǎn)單快速地進(jìn)行查詢,適用于日志實(shí)時(shí)數(shù)據(jù)分析、安全診斷與分析、運(yùn)營(yíng)與客服系統(tǒng)等,例如云服務(wù)的訪問量、點(diǎn)擊量等,通過日志數(shù)據(jù)分析,可以輸出詳細(xì)的運(yùn)營(yíng)數(shù)據(jù)。
對(duì)采集的日志數(shù)據(jù),可以通過關(guān)鍵字查詢、模糊查詢等方式簡(jiǎn)單快速地進(jìn)行查詢,適用于日志實(shí)時(shí)數(shù)據(jù)分析、安全診斷與分析、運(yùn)營(yíng)與客服系統(tǒng)等,例如云服務(wù)的訪問量、點(diǎn)擊量等,通過日志數(shù)據(jù)分析,可以輸出詳細(xì)的運(yùn)營(yíng)數(shù)據(jù)。
-
日志監(jiān)控與告警
云日志服務(wù)結(jié)合應(yīng)用運(yùn)維管理(Application Operations Management,簡(jiǎn)稱AOM),支持對(duì)存儲(chǔ)在云日志服務(wù)中的日志數(shù)據(jù)進(jìn)行關(guān)鍵詞統(tǒng)計(jì),通過在一定時(shí)間段內(nèi)日志中關(guān)鍵字出現(xiàn)次數(shù),實(shí)時(shí)監(jiān)控服務(wù)運(yùn)行狀態(tài)。
云日志服務(wù)結(jié)合應(yīng)用運(yùn)維管理(Application Operations Management,簡(jiǎn)稱AOM),支持對(duì)存儲(chǔ)在云日志服務(wù)中的日志數(shù)據(jù)進(jìn)行關(guān)鍵詞統(tǒng)計(jì),通過在一定時(shí)間段內(nèi)日志中關(guān)鍵字出現(xiàn)次數(shù),實(shí)時(shí)監(jiān)控服務(wù)運(yùn)行狀態(tài)。
云日志服務(wù) LTS應(yīng)用場(chǎng)景
日志采集與分析、合理優(yōu)化業(yè)務(wù)性能、快速定位網(wǎng)絡(luò)故障
日志采集與分析
主機(jī)和云服務(wù)的日志數(shù)據(jù),不方便查閱并且會(huì)定期清空。云日志服務(wù)采集日志后,日志數(shù)據(jù)可以在云日志控制臺(tái)以簡(jiǎn)單有序的方式展示、方便快捷的方式進(jìn)行查詢,并且可以長(zhǎng)期存儲(chǔ)。對(duì)采集的日志數(shù)據(jù),可以通過關(guān)鍵字查詢、模糊查詢等方式簡(jiǎn)單快速地進(jìn)行查詢,適用于日志實(shí)時(shí)數(shù)據(jù)分析、安全診斷與分析、運(yùn)營(yíng)與客服系統(tǒng)等,例如云服務(wù)的訪問量、點(diǎn)擊量等,通過日志數(shù)據(jù)分析,可以輸出詳細(xì)的運(yùn)營(yíng)數(shù)據(jù)。
合理優(yōu)化業(yè)務(wù)性能
網(wǎng)站服務(wù)(數(shù)據(jù)庫(kù)、網(wǎng)絡(luò)等)的性能和服務(wù)質(zhì)量是衡量用戶滿意度的關(guān)鍵指標(biāo),通過用戶的擁塞記錄日志發(fā)現(xiàn)站點(diǎn)的性能瓶頸,以提示站點(diǎn)管理者改進(jìn)網(wǎng)站緩存策略、網(wǎng)絡(luò)傳輸策略等,合理優(yōu)化業(yè)務(wù)性能。例如:
1、分析歷史網(wǎng)站數(shù)據(jù),構(gòu)建業(yè)務(wù)網(wǎng)絡(luò)基準(zhǔn)。
2、及時(shí)發(fā)現(xiàn)業(yè)務(wù)性能瓶頸,合理擴(kuò)容或流量下調(diào)。
3、分析網(wǎng)絡(luò)流量,優(yōu)化網(wǎng)絡(luò)安全策略。
快速定位網(wǎng)絡(luò)故障
網(wǎng)絡(luò)質(zhì)量是業(yè)務(wù)穩(wěn)定的基石,將日志上報(bào)至云日志服務(wù),確保問題發(fā)生時(shí)能及時(shí)查看、定位問題,助力您快速定位網(wǎng)絡(luò)故障,進(jìn)行網(wǎng)絡(luò)回溯取證。例如:
1、快速定位問題根源的云服務(wù)器,例如帶寬過度使用的云服務(wù)器
2、過分析訪問日志,判斷業(yè)務(wù)是否遭到了攻擊、非法盜鏈和不良請(qǐng)求等,及時(shí)定位并解決問題。
云日志服務(wù) LTS相關(guān)教程
云日志服務(wù) LTS
03:36
云日志服務(wù) LTS
02:33
云日志服務(wù) LTS
04:52