隨著業(yè)務(wù)系統(tǒng)的日趨復(fù)雜化，日志顯現(xiàn)出數(shù)量龐大、無(wú)固定模式、不易讀懂等特點(diǎn)。日志數(shù)據(jù)是運(yùn)維監(jiān)控中主要的數(shù)據(jù)源，記錄了從業(yè)務(wù)、中間件、系統(tǒng)等全鏈路信息，可以有效監(jiān)控IT系統(tǒng)各個(gè)層面，從而快速診斷系統(tǒng)故障，洞察系統(tǒng)運(yùn)行狀況，對(duì)于開(kāi)發(fā)、運(yùn)維、測(cè)試和審計(jì)等各個(gè)環(huán)節(jié)工作都有非常重要的作用。
日志數(shù)據(jù)，企業(yè)數(shù)據(jù)資產(chǎn)的一座金礦
日志數(shù)據(jù)是系統(tǒng)所指定對(duì)象的某些操作和其操作結(jié)果按時(shí)間有序的集合，每個(gè)日志文件由日志記錄組成，每條日志記錄描述了一次單獨(dú)的系統(tǒng)事件。大量信息隱藏在海量日志中，面對(duì)持續(xù)增長(zhǎng)的數(shù)據(jù)，如何快速解讀、實(shí)時(shí)檢測(cè)和深度挖掘日志的價(jià)值，面臨著巨大的挑戰(zhàn)。因此規(guī)范、充分、信息明確的日志數(shù)據(jù)是IT故障診斷的重要依據(jù)，可以幫助運(yùn)維人員快速定位、發(fā)現(xiàn)和處理IT相關(guān)的業(yè)務(wù)問(wèn)題。
日志數(shù)據(jù)可謂企業(yè)數(shù)據(jù)資產(chǎn)的一座金礦，深入挖掘日志價(jià)值已經(jīng)成為當(dāng)前日志研究的主要方向：利用日志進(jìn)行業(yè)務(wù)流程的挖掘、基于日志進(jìn)行根因分析、利用日志作出故障預(yù)警、掌握系統(tǒng)運(yùn)行性能、輔助軟件測(cè)試等，這也大大提高了對(duì)日志的洞察要求。
傳統(tǒng)運(yùn)維依靠人力從日志中排查故障原因，主要通過(guò)grep、sed等指令利用關(guān)鍵詞(error, fail, exception等)進(jìn)行搜索，或利用基于規(guī)則的日志提取方法，通過(guò)傳統(tǒng)方式手動(dòng)設(shè)置來(lái)解析日志，對(duì)代碼要求高、操作繁瑣、排障時(shí)間長(zhǎng)。
因此，利用機(jī)器學(xué)習(xí)等人工智能技術(shù)和大數(shù)據(jù)技術(shù)構(gòu)建一體化的日志分析平臺(tái)，對(duì)離散日志數(shù)據(jù)進(jìn)行統(tǒng)一采集、處理、檢索、可視化分析，是解決當(dāng)前日志分析難題的重要手段。智能日志分析平臺(tái)減少了人工篩查時(shí)間，幫助運(yùn)維人員更快的定位故障，判斷失敗類型，有效地提高故障診斷和恢復(fù)效率。
洞察日志之美，云智慧全面升級(jí)智能日志分析平臺(tái)
云智慧匠心研發(fā)的新一代智能化日志管理與分析平臺(tái)DOLA(即Digital Operation Log Analytics)，基于大數(shù)據(jù)技術(shù)與智能算法，實(shí)現(xiàn)海量離散日志的統(tǒng)一采集管理、多類型日志解析、SPL/SQL雙語(yǔ)言檢索、日志智能告警、業(yè)務(wù)全鏈路分析、分級(jí)存儲(chǔ)和豐富的可視化分析?？蓮V泛應(yīng)用于統(tǒng)一日志管理、運(yùn)維監(jiān)控與分析、調(diào)用鏈追蹤、安全審計(jì)與合規(guī)，以及各種業(yè)務(wù)分析等數(shù)字化運(yùn)維和運(yùn)營(yíng)場(chǎng)景。
基于聚類的智能化日志模式識(shí)別
業(yè)務(wù)全鏈路追蹤
全新升級(jí)的云智慧智能化日志分析平臺(tái)包括以下功能：
? 基于聚類的日志模式識(shí)別：通過(guò)聚類算法，進(jìn)行相似日志文本的數(shù)據(jù)聚合，可通過(guò)聚類靈敏度調(diào)節(jié)日志模式發(fā)現(xiàn)的粒度，幫助運(yùn)維人員快速定位和發(fā)現(xiàn)異常日志;
? 日志全文搜索：提供強(qiáng)大的日志搜索能力，支持SPL/SQL雙語(yǔ)法混合搜索，支持字段值過(guò)濾、劃詞分析等快速搜索方式，同時(shí)支持搜索結(jié)果高亮顯示，日志上下文詳情查看;
? 日志智能告警：基于算法的智能日志異常指標(biāo)監(jiān)控，提供多指標(biāo)異常告警、模式增量告警，提供全流程的事件管理服務(wù);
? 業(yè)務(wù)全鏈路追蹤：面向業(yè)務(wù)的全局拓?fù)湔故?、服?wù)分析、全鏈路追蹤，幫助運(yùn)維人員快速分析系統(tǒng)性能消耗原因、準(zhǔn)確定位異常;
? 日志可視化分析：基于搜索結(jié)果的多維度日志可視化分析呈現(xiàn)，提供折線圖、柱狀圖、餅狀圖、雷達(dá)圖、散點(diǎn)圖、線性回歸等常用可視化模板;
? 儀表報(bào)表管理：快速便捷的動(dòng)態(tài)儀表報(bào)表管理模塊，能夠自定義儀表盤的快速配置，同時(shí)支持業(yè)務(wù)關(guān)鍵數(shù)據(jù)的實(shí)時(shí)呈現(xiàn);
? 可視化數(shù)據(jù)處理流程：可視化數(shù)據(jù)處理Pipeline，支持通過(guò)拖拽方式進(jìn)行數(shù)據(jù)處理組件的自由組合應(yīng)用，自主創(chuàng)建數(shù)據(jù)處理流程。
依托云智慧自研的CDC數(shù)據(jù)采集器和DODB專業(yè)運(yùn)維數(shù)據(jù)庫(kù)產(chǎn)品，DOLA平臺(tái)擁有靈活的數(shù)據(jù)采集能力和強(qiáng)大的數(shù)據(jù)處理能力：
√ 支持自有高性能采集器，兼容主流開(kāi)源數(shù)據(jù)采集器、靈活水平擴(kuò)展的數(shù)據(jù)接入接口;
√ 快速接入流式數(shù)據(jù)，超高的吞吐量和極小的響應(yīng)時(shí)間，數(shù)據(jù)接入即可秒級(jí)查詢;
√ 支持根據(jù)數(shù)據(jù)量進(jìn)行水平伸縮，數(shù)據(jù)處理能力：30T/天，eps：130萬(wàn)/秒;
√ 支持多個(gè)節(jié)點(diǎn)同時(shí)寫入，單節(jié)點(diǎn)寫入速度：60萬(wàn)/s，在同等條件下是Elasticsearch 的10倍以上。
云智慧智能化日志分析平臺(tái)具有對(duì)業(yè)務(wù)系統(tǒng)無(wú)侵入性、通用性、智能化、實(shí)時(shí)可視化分析等特點(diǎn)，目前已廣泛應(yīng)用于銀行、保險(xiǎn)、證券、航空、交通、政企等行業(yè)。如果您想進(jìn)一步了解此產(chǎn)品，請(qǐng)?jiān)L問(wèn)云智慧官網(wǎng)：https://www.cloudwise.com/dola.html，或撥打官方客服電話：4006661332，索取詳細(xì)資料。
（免責(zé)聲明：本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請(qǐng)進(jìn)一步核實(shí)，并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏，概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí)，應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說(shuō)明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。 ）
