阿里基于內(nèi)核剖析的故障分析和智能運(yùn)維實(shí)現(xiàn)目前致力于阿里超大規(guī)模數(shù)據(jù)中心的穩(wěn)定性和可靠性建設(shè)，新硬件與軟件的協(xié)同設(shè)計(jì)等基礎(chǔ)技術(shù)領(lǐng)域的研發(fā)與工程化落地。主要研究領(lǐng)域包括：SOC芯片的前端構(gòu)建、仿真，電信級(jí)Linux內(nèi)核研發(fā)，百萬(wàn)級(jí)系統(tǒng)智能運(yùn)維，以及行業(yè)應(yīng)用的全生棧軟硬件技術(shù)及其融合應(yīng)用。曾參與中國(guó)嵌入式系統(tǒng)學(xué)科體系建設(shè)，國(guó)家電網(wǎng)智能電網(wǎng)國(guó)家標(biāo)準(zhǔn)的制定。運(yùn)維的趨勢(shì)運(yùn)維的現(xiàn)狀和挑戰(zhàn)更好的運(yùn)維體驗(yàn)龍蜥運(yùn)維SIG（興趣組）運(yùn)維的趨勢(shì)?對(duì)整體運(yùn)維環(huán)境無(wú)感知，無(wú)法應(yīng)對(duì)任何的基礎(chǔ)設(shè)施運(yùn)維?存在基礎(chǔ)設(shè)施的運(yùn)維人員，運(yùn)維的成本高運(yùn)維的現(xiàn)狀和挑戰(zhàn)配置部署管理系統(tǒng)監(jiān)控社區(qū)工具不知其然只知其然而不知傳統(tǒng)運(yùn)維平臺(tái)的視角傳統(tǒng)IaaS提供商的視角客戶(hù)的應(yīng)用視角傳統(tǒng)運(yùn)維平臺(tái)的視角傳統(tǒng)IaaS提供商的視角客戶(hù)的應(yīng)用視角進(jìn)程B的內(nèi)存問(wèn)題，很難讓運(yùn)維人員關(guān)聯(lián)到進(jìn)程A的寫(xiě)文件操作可能引發(fā)的內(nèi)存不足告警可能引發(fā)的內(nèi)進(jìn)程B的內(nèi)存問(wèn)題，很難讓運(yùn)維人員關(guān)聯(lián)到進(jìn)程A的寫(xiě)文件操作可能引發(fā)的內(nèi)存不足告警可能引發(fā)的內(nèi)存訪問(wèn)時(shí)延更糟的是，我們沒(méi)有辦法知道，究竟在哪個(gè)時(shí)刻會(huì)引發(fā)問(wèn)題。糟糕的是，不僅僅是案例所闡述的內(nèi)存問(wèn)題，糟糕的是，不僅僅是案例所闡述的內(nèi)存問(wèn)題，在操作系統(tǒng)內(nèi)部網(wǎng)絡(luò)、IO、內(nèi)存、調(diào)度皆大量存在類(lèi)似問(wèn)題。更好的運(yùn)維體驗(yàn)實(shí)現(xiàn)診斷功能與客戶(hù)應(yīng)用表象的關(guān)聯(lián)，實(shí)現(xiàn)診斷功能與客戶(hù)應(yīng)用表象的關(guān)聯(lián)，基于內(nèi)核深度剖析智能一體化運(yùn)維流程監(jiān)控與深度問(wèn)題診斷聯(lián)動(dòng)，知其然又知所以然；集群化的大數(shù)據(jù)、AI分析，深入內(nèi)核的運(yùn)維SysOMSysOM2.0內(nèi)存診斷功能和實(shí)踐場(chǎng)景主要使用場(chǎng)景：主要使用場(chǎng)景：2.查詢(xún)OOM原因，并做出優(yōu)化改進(jìn)，預(yù)主要使用場(chǎng)景：內(nèi)存大盤(pán)內(nèi)存診斷內(nèi)存大盤(pán)內(nèi)存診斷2.0-Sy2.0-SysOM診斷內(nèi)存診斷OOM診斷內(nèi)存診斷OOM2.0-Sy2.0-SysOM分析Cache內(nèi)存診斷分析Cache內(nèi)存診斷2.0-Sy2.0-SysOM常見(jiàn)調(diào)度問(wèn)題 _______________________________應(yīng)用抖動(dòng)原因各種各樣，除應(yīng)用自身邏輯處理有缺陷外，___八___執(zhí)行過(guò)程偶爾耗時(shí)增加SysOM2.SysOM2.0功能定位：診斷系統(tǒng)負(fù)載高是由哪些進(jìn)程引起，及負(fù)載高是否對(duì)!!1.診斷系統(tǒng)負(fù)載高是否對(duì)系統(tǒng)的sys利用率、harSysOM2.SysOM2.0SysOM2.SysOM2.0SysOM2.SysOM2.0SysOMSysOM2.0事件總覽調(diào)度問(wèn)題發(fā)生的頻次調(diào)度問(wèn)題詳細(xì)信息SysOM2.SysOM2.0?追溯IO流量沖高來(lái)源進(jìn)程、文件、磁盤(pán)問(wèn)題診斷流量分析IOIOBurst問(wèn)題診斷流量分析IOIOBurst2.0——Sy2.0——SysOM?通過(guò)在文件系統(tǒng)、塊層追蹤IO，獲取更細(xì)粒度的IO流量分布信息，支持追溯IO來(lái)源?通過(guò)信息聚合分析，支持追溯bufferio實(shí)際來(lái)源SysOM2.0IOSysOM2.0IO診斷延遲分析SysOM2.0IOIO——延遲性能問(wèn)題診斷延遲分析SysOM2.0IOIO——App/App/filesystem/… …iidp3dp4dp3dp4… dp:driverpoint?通過(guò)對(duì)IO鏈路追蹤，獲取IO各鏈路延遲分布?通過(guò)展開(kāi)IO更多細(xì)節(jié)信息，分析進(jìn)程IO的延遲性能瓶頸SysOM2.0IOSysOM2.0IO問(wèn)題SysOM2.0IOHANGHANG診斷——分析問(wèn)題SysOM2.0IOHANG…}Virtio-Virtio-blk??IO未下發(fā)問(wèn)題?中斷處理問(wèn)題?通過(guò)提取vring特征，界定磁盤(pán)HANG或OSH