企業(yè)數(shù)據(jù)治理之存儲治理方案1、數(shù)據(jù)增長速度加快，造成存儲消耗成本成倍增加。2、數(shù)據(jù)增長不可控，導(dǎo)致年度預(yù)算及存儲無法穩(wěn)定。3、數(shù)據(jù)價值不可衡量，導(dǎo)致無法決策交付。4、存儲資源的浪費(fèi)，導(dǎo)致集群成本增加。需求背景1、建立數(shù)據(jù)增長預(yù)測及評估體系，實(shí)現(xiàn)數(shù)據(jù)增長可洞察2、建立數(shù)據(jù)長效及應(yīng)急治理體系，實(shí)現(xiàn)數(shù)據(jù)增長可控制3、建立數(shù)據(jù)價值評估體系，實(shí)現(xiàn)資產(chǎn)價值可衡量4、建立壓縮及低成本存儲架構(gòu)體系，降低整體存儲成本必要性&價值存儲治理

-

現(xiàn)狀及背景03存儲成本可降低根據(jù)數(shù)據(jù)價值及數(shù)據(jù)利用率建立數(shù)據(jù)周期性壓縮機(jī)制，

減少數(shù)據(jù)存儲。通過調(diào)整冷數(shù)據(jù)存儲介質(zhì)減少機(jī)器成本。01數(shù)據(jù)增長可控制建立數(shù)據(jù)增長預(yù)測、評估及監(jiān)控體系，

通過生命周期管理及規(guī)則治理實(shí)現(xiàn)數(shù)據(jù)存儲治理自動化，

針對異常增長實(shí)行專項或應(yīng)急舉措治理。02數(shù)據(jù)價值可衡量通過資產(chǎn)盤點(diǎn)實(shí)現(xiàn)數(shù)據(jù)應(yīng)用業(yè)務(wù)及服務(wù)劃分，

建立數(shù)據(jù)價值評估體系，

針對不同價值數(shù)據(jù)進(jìn)行分類存儲保障及治理，

并按照數(shù)據(jù)應(yīng)用業(yè)務(wù)劃分建立存儲成本分?jǐn)倷C(jī)制存儲治理

-

目標(biāo)存儲治理

-

解決方案自動化治理智能化治理運(yùn)動式治理數(shù)據(jù)登記數(shù)據(jù)生產(chǎn)及采集上報數(shù)據(jù)采集數(shù)據(jù)處理數(shù)據(jù)輸出羅盤無效埋點(diǎn)離線接入生命周期平臺數(shù)據(jù)倉庫數(shù)據(jù)應(yīng)用業(yè)務(wù)系統(tǒng)重復(fù)埋點(diǎn)測試埋點(diǎn)錯誤埋點(diǎn)低價值埋點(diǎn)測試數(shù)據(jù)無效數(shù)據(jù)小文件合并終端上報 DP業(yè)務(wù)埋點(diǎn) 埋點(diǎn)過濾推薦埋點(diǎn) PID合并搜索埋點(diǎn) 維度合并DSP埋點(diǎn)長度優(yōu)化服務(wù)埋點(diǎn)無效來源DataBus異常增長檢測實(shí)時接入數(shù)據(jù)價值評估數(shù)據(jù)資產(chǎn)目錄盤點(diǎn)歸檔遷移全量改增量業(yè)務(wù)重復(fù)校驗(yàn)EC、壓縮存儲層級改造無效模型治理模型合理性無應(yīng)用治理低價值應(yīng)用治理API合理性看板合理性指標(biāo)合理性項目合理性存儲治理

–

全鏈路治理手段存儲治理

-

生命周期管理維度管理表集管理規(guī)則配置確認(rèn)流程成本周知效果回收批量表現(xiàn)狀分析與維度梳理數(shù)據(jù)生命周期配置與確認(rèn)效果周知與反饋批量表配置流程單表配置流程新建表強(qiáng)制配置配置生命周期配置確認(rèn)周期配置排除分區(qū)自動清理已有表單配置選擇生命周期標(biāo)簽自動清理整理制作郎豐利1519存儲治理

-

數(shù)據(jù)資產(chǎn)目錄業(yè)務(wù)標(biāo)準(zhǔn)部門業(yè)務(wù)服務(wù)服務(wù)標(biāo)準(zhǔn)部門平臺服務(wù)業(yè)務(wù)及服務(wù)標(biāo)準(zhǔn)部門分類標(biāo)簽大數(shù)據(jù)業(yè)務(wù)服務(wù)標(biāo)準(zhǔn)數(shù)據(jù)血緣資產(chǎn)目錄應(yīng)用存儲模型質(zhì)量場景識別引擎數(shù)據(jù)價值高價值中價值低價值無價值基于經(jīng)驗(yàn)規(guī)則計算模型成功失敗1.

進(jìn)入2.1

形成2.2

進(jìn)入計算模型3

形成數(shù)據(jù)應(yīng)用數(shù)據(jù)治理數(shù)據(jù)存儲數(shù)據(jù)質(zhì)量數(shù)據(jù)安全存儲治理

-

數(shù)據(jù)價值評估謝謝聆聽整理制作：郎豐利1519制作時間：2023年睿利而