博睿數(shù)據(jù)BOnreeBACKGROUND博睿數(shù)據(jù)BOnreeLOG日志60TB/日博睿數(shù)據(jù)BOnree改變傳統(tǒng)的運(yùn)維模式，化被動(dòng)為主動(dòng)業(yè)務(wù)日志分析能力欠缺,影響問(wèn)題排查效率監(jiān)控覆蓋度不全,出現(xiàn)故障漏報(bào),業(yè)務(wù)日志分析能力欠缺,影響問(wèn)題排查效率風(fēng)險(xiǎn)防范意識(shí)不足,報(bào)警平臺(tái)、信息過(guò)多,有價(jià)值的報(bào)警信息容易被淹沒且分散風(fēng)險(xiǎn)防范意識(shí)不足,機(jī)器資源一直在申請(qǐng),從未被回收,機(jī)器資源一直在申請(qǐng),從未被回收,浪費(fèi)嚴(yán)重鏈不清晰,無(wú)法快速確認(rèn)故障影響范圍SOLUTION博睿數(shù)據(jù)BOnree系統(tǒng)運(yùn)作過(guò)程中，風(fēng)險(xiǎn)雖然不影響用戶體驗(yàn)，但多個(gè)風(fēng)險(xiǎn)累積容易發(fā)生平臺(tái)打不開、數(shù)據(jù)丟失等故障問(wèn)題。為了提前發(fā)現(xiàn)風(fēng)險(xiǎn)將故障扼殺在搖籃中，運(yùn)維團(tuán)隊(duì)不斷完善BonreeONE的指標(biāo)體系建設(shè)，AI風(fēng)險(xiǎn)檢測(cè)更加準(zhǔn)確。在日常運(yùn)行中，當(dāng)系統(tǒng)檢測(cè)到有一個(gè)多活程序掛了，運(yùn)維人員便能立刻發(fā)現(xiàn)去解決；CPU過(guò)高時(shí)，系統(tǒng)發(fā)出告警，負(fù)責(zé)人員便能及時(shí)打堆棧，并聯(lián)系研發(fā)部門分析原因，在風(fēng)險(xiǎn)累積衍生成故障之前解決問(wèn)題，降低故障發(fā)生率。博睿數(shù)據(jù)BOnreeBonreePilot的自動(dòng)巡檢和即時(shí)巡檢功能利用自動(dòng)巡檢與即時(shí)巡檢功能，對(duì)BonreeONE全套組件以及核心指標(biāo)實(shí)施全面健康監(jiān)測(cè)，涵蓋主機(jī)監(jiān)控、服務(wù)監(jiān)控、運(yùn)營(yíng)分析、告警管理、業(yè)務(wù)監(jiān)控等多個(gè)關(guān)鍵模塊。當(dāng)巡檢報(bào)告中出現(xiàn)了告警和問(wèn)題，例如磁盤容量告急：過(guò)去的被動(dòng)運(yùn)維：磁盤容量告急，立馬縮減/擴(kuò)容現(xiàn)在的主動(dòng)運(yùn)維：磁盤容量告急，先看表詳情，觀察這些表的增長(zhǎng)趨勢(shì)是否合理，表結(jié)構(gòu)設(shè)計(jì)是否合理，是否存在優(yōu)化空間，將空間釋放、不合理設(shè)計(jì)優(yōu)化后再采取對(duì)應(yīng)的解決措施進(jìn)行縮減/擴(kuò)容，對(duì)運(yùn)維成本進(jìn)行主動(dòng)管控。博睿數(shù)據(jù)BOnree集成能力將將Zabbix、Prometheus等監(jiān)控方式通過(guò)集成功能，實(shí)現(xiàn)一體化存儲(chǔ)，用全棧根因分析，統(tǒng)一告警，運(yùn)維人員無(wú)需監(jiān)控每一博睿數(shù)據(jù)BOnree運(yùn)維團(tuán)隊(duì)搶先體驗(yàn)了BonreeONE3.0的新功能：可用性監(jiān)測(cè)。可用性監(jiān)測(cè)支持HTTP多地址訪問(wèn)，釋放了運(yùn)維人員寫腳本的工作量。同時(shí)能夠自定義內(nèi)外網(wǎng)監(jiān)測(cè)點(diǎn)，以前對(duì)公網(wǎng)域名監(jiān)控時(shí)需要給Zabbix機(jī)器增加外網(wǎng)訪問(wèn)的能力，因Zabbix機(jī)器有訪問(wèn)所有機(jī)器的權(quán)限，具備外網(wǎng)能力后，這顯然不符合安全規(guī)定?？捎眯员O(jiān)測(cè)功能夠同時(shí)使用內(nèi)網(wǎng)和外網(wǎng)的監(jiān)測(cè)點(diǎn)，很好地解決了這個(gè)問(wèn)題。新功能彌補(bǔ)了開源工具對(duì)HTTP監(jiān)控的缺失，也降低運(yùn)維人員對(duì)shell腳本開發(fā)能力的依賴。3.AI智能觀測(cè)，快速定位根因問(wèn)題與影響范圍全域分析將數(shù)據(jù)統(tǒng)一集成到BonreeONE后，運(yùn)維團(tuán)隊(duì)以實(shí)體關(guān)系為核心構(gòu)建數(shù)據(jù)指標(biāo)體系，平臺(tái)統(tǒng)一對(duì)數(shù)據(jù)進(jìn)行分析、關(guān)聯(lián)、查看過(guò)去查看日志需要上機(jī)器，且日志需符合等保3級(jí)對(duì)日志審計(jì)系統(tǒng)的要求，系統(tǒng)日志、安全日志、關(guān)鍵配置等均要能夠保存和分析，現(xiàn)在在平臺(tái)上便能立即查看相關(guān)日志信息，打破運(yùn)維傳統(tǒng)的流程慣例。博睿數(shù)據(jù)BOnree博睿數(shù)據(jù)BOnree接入Zabbix、Prometheus等第三方數(shù)據(jù)后，運(yùn)維人員能夠通過(guò)查看依賴分析影響范圍，很直觀地看出當(dāng)前程序訪問(wèn)了哪些服務(wù)，以及哪些服務(wù)訪問(wèn)了當(dāng)前程序。調(diào)用鏈分析能夠在問(wèn)題出現(xiàn)時(shí)幫助運(yùn)維團(tuán)隊(duì)定位到Server領(lǐng)域或者慢方法，定位更準(zhǔn)確，節(jié)約時(shí)間。發(fā)現(xiàn)風(fēng)險(xiǎn)報(bào)警問(wèn)題后，打開問(wèn)題詳情，通過(guò)詳情清單查看本次故障所涉及到的實(shí)體信息。博睿數(shù)據(jù)BOnree根據(jù)系統(tǒng)提供的初步判斷查看具體的方法、SQL等博睿數(shù)據(jù)BOnree通過(guò)使用BonreeONE，運(yùn)維團(tuán)隊(duì)的工作模式實(shí)現(xiàn)了從被動(dòng)應(yīng)對(duì)問(wèn)題向主動(dòng)治理風(fēng)險(xiǎn)的根本性轉(zhuǎn)變。主動(dòng)運(yùn)維策略將風(fēng)險(xiǎn)與問(wèn)題前置，團(tuán)隊(duì)能夠提前識(shí)別并解決風(fēng)險(xiǎn)，顯著提升系統(tǒng)穩(wěn)定性的同時(shí)極大地減輕了運(yùn)維人員的工作負(fù)擔(dān)。同時(shí)，風(fēng)險(xiǎn)與問(wèn)題前置也為運(yùn)維人員爭(zhēng)取了充裕的時(shí)間，能夠在問(wèn)題出現(xiàn)前對(duì)系統(tǒng)進(jìn)行深入的觀察和分析，及時(shí)進(jìn)行必要的調(diào)整優(yōu)化，這不僅提升了運(yùn)維效率，還實(shí)現(xiàn)了資源成本的節(jié)約。2024年1月至9月期間，BonreeONE的運(yùn)用及運(yùn)維團(tuán)隊(duì)工作模式的轉(zhuǎn)變已成功為公司節(jié)約成本近80w人民幣(≈物理機(jī)12臺(tái)）。博睿數(shù)據(jù)