整體技術部DWConceptPAGE內部資料注意保密第14頁DWConcept數(shù)據(jù)質量分冊作者任少斌時間審核時間批準時間北京用友華表軟件技術有限公司修訂記錄版本號發(fā)布日期編制人審核人/批準人修改章節(jié)號V1.0前言目的本規(guī)范的制定是為了更好的實施數(shù)據(jù)倉庫的數(shù)據(jù)質量管理的建設，數(shù)據(jù)質量的監(jiān)控和全視圖使得我們在數(shù)據(jù)處理的各個環(huán)節(jié)中能及時發(fā)現(xiàn)、定位和解決各類數(shù)據(jù)質量問題，確保數(shù)據(jù)質量的穩(wěn)定可靠，是信息交付的保障。范圍本文檔規(guī)定了一般數(shù)據(jù)倉庫過程中數(shù)據(jù)質量管理的建設內容，供數(shù)據(jù)質量管理系統(tǒng)設計開發(fā)人員及欲了解數(shù)據(jù)倉庫數(shù)據(jù)質量管理的同事共同使用，內容涉及數(shù)據(jù)質量監(jiān)控與問題處理（數(shù)據(jù)質量規(guī)則庫、采集、告警或質量報告、質量問題處理）、元數(shù)據(jù)變更監(jiān)控、數(shù)據(jù)質量知識庫以及數(shù)據(jù)質量對外服務等。引用文件下列文件為本規(guī)范引用文件列表。《DWConcept數(shù)據(jù)建模分冊.doc》《DWConcept元數(shù)據(jù)分冊.doc》縮略語解釋字母名詞解釋S數(shù)據(jù)質量監(jiān)控自動獲取數(shù)據(jù)倉庫各環(huán)節(jié)的數(shù)據(jù)質量信息，結合元數(shù)據(jù)庫中的有關檢查規(guī)則，對數(shù)據(jù)質量情況進行診斷，并及時向數(shù)據(jù)質量監(jiān)控人員報告S數(shù)據(jù)質量知識庫數(shù)據(jù)質量管理系統(tǒng)存儲層上的存儲信息庫，主要包括各種檢查規(guī)則和檢查結果報告(包括告警)，以及數(shù)據(jù)質量問題的處理過程信息UUSP統(tǒng)一調度平臺，即數(shù)據(jù)倉庫工作流引擎Y元數(shù)據(jù)元數(shù)據(jù)(MetaData)泛指描述領域概念(DomainConcepts)、領域關系(DomainRoles)、領域規(guī)則(DomainRules)的數(shù)據(jù)，其中，領域語義(Semantics)和知識(Knowledge)也屬于元數(shù)據(jù)的范疇Y元數(shù)據(jù)變更監(jiān)控元數(shù)據(jù)變更監(jiān)控是獲取元數(shù)據(jù)變更信息，調用元數(shù)據(jù)管理系統(tǒng)相關分析功能對元數(shù)據(jù)變更進行影響分析，對元數(shù)據(jù)變更進行關鍵實體影響的監(jiān)控數(shù)據(jù)質量概述數(shù)據(jù)質量管理系統(tǒng)是數(shù)據(jù)倉庫數(shù)據(jù)管理域的重要組成部分。本章從數(shù)據(jù)質量概述、建設目標和數(shù)據(jù)質量問題域三個方面對數(shù)據(jù)質量管理系統(tǒng)進行概要描述。數(shù)據(jù)質量概述數(shù)據(jù)質量管理系統(tǒng)包括對數(shù)據(jù)源接口、數(shù)據(jù)實體、數(shù)據(jù)處理過程、數(shù)據(jù)應用和業(yè)務指標等相關內容的管控機制和處理流程，也包括對數(shù)據(jù)質量管控和處理的信息總結和知識應用等輔助內容。本手冊描述了數(shù)據(jù)質量管理的范圍和要求，描述了數(shù)據(jù)質量管理體系結構，規(guī)定了數(shù)據(jù)質量管理系統(tǒng)的基礎功能和處理流程，強調了元數(shù)據(jù)變更聯(lián)動機制的構建，強調了數(shù)據(jù)質量管控信息總結、知識沉淀和經驗重用。本規(guī)范要求形成由數(shù)據(jù)質量監(jiān)控與問題處理（數(shù)據(jù)質量規(guī)則庫、采集、告警或質量報告、質量問題處理）、元數(shù)據(jù)變更監(jiān)控、數(shù)據(jù)質量知識庫以及數(shù)據(jù)質量對外服務等功能構成的數(shù)據(jù)質量管理系統(tǒng)，以及基于該系統(tǒng)的數(shù)據(jù)質量管控流程和技術要求。數(shù)據(jù)質量管理系統(tǒng)的某些功能將引用元數(shù)據(jù)管理系統(tǒng)的相關支持，詳見《DWConcept元數(shù)據(jù)分冊.doc》。一般監(jiān)控流程數(shù)據(jù)質量管理一般流程如下圖所示。系統(tǒng)建設目標數(shù)據(jù)質量管理系統(tǒng)以“深化數(shù)據(jù)質量管控能力，構建元數(shù)據(jù)變更聯(lián)動機制”為建設目標，具體包括：實現(xiàn)對元數(shù)據(jù)變更的監(jiān)控管理，通過對元數(shù)據(jù)變更的獲取及影響分析，在數(shù)據(jù)質量管控基礎上，盡快暴露由各種實體變更或者數(shù)據(jù)處理過程變更而引起的數(shù)據(jù)質量問題，構建元數(shù)據(jù)變更聯(lián)動機制。建立有效的數(shù)據(jù)質量監(jiān)控機制,在數(shù)據(jù)倉庫數(shù)據(jù)處理主要階段設置數(shù)據(jù)質量檢測點，實現(xiàn)關鍵實體監(jiān)控、實體關系監(jiān)控、明細匯總監(jiān)控、關鍵指標監(jiān)控以及元數(shù)據(jù)變更監(jiān)控，實現(xiàn)從源系統(tǒng)接口層到應用層的全流程數(shù)據(jù)質量監(jiān)控，便于數(shù)據(jù)質量問題提前發(fā)現(xiàn)和及時處理。同時，管理在數(shù)據(jù)質量監(jiān)控中產生的告警信息，并集成元數(shù)據(jù)信息，實現(xiàn)拓撲呈現(xiàn)，提供數(shù)據(jù)處理狀態(tài)和質量狀況的全局視圖。建立數(shù)據(jù)質量報告功能，實現(xiàn)對數(shù)據(jù)質量管理系統(tǒng)各種信息的匯總、梳理、統(tǒng)計和分析，提供全面及時的數(shù)據(jù)質量報告，預防和控制錯誤范圍的擴大，便于數(shù)據(jù)質量管控信息總結、知識沉淀和經驗重用。數(shù)據(jù)質量問題域數(shù)據(jù)質量問題按照來源和具體原因，可以分為信息、技術、流程和管理四個問題域，如下圖所示。信息問題域信息類問題是由于對數(shù)據(jù)本身的描述、理解及其度量標準偏差而造成的數(shù)據(jù)質量問題，如下圖所示。產生這類數(shù)據(jù)質量問題的原因主要有：元數(shù)據(jù)描述及理解錯誤、數(shù)據(jù)度量得不到保證和變化頻度不恰當?shù)?。?shù)據(jù)度量主要包括完整性、唯一性、一致性、準確性和合法性。變化頻度主要包括業(yè)務系統(tǒng)數(shù)據(jù)的變化周期和實體數(shù)據(jù)的刷新周期。信息類問題中易引起描述及理解錯誤的元數(shù)據(jù)主要包括：業(yè)務元數(shù)據(jù)——主要包括業(yè)務規(guī)則、業(yè)務術語和業(yè)務指標口徑等；技術元數(shù)據(jù)——主要包括數(shù)據(jù)源接口規(guī)范、依賴關系、ETL轉換、數(shù)據(jù)建模和工具等方面的內容。技術域問題技術類問題是指由于具體數(shù)據(jù)處理的各技術環(huán)節(jié)異常而造成的數(shù)據(jù)質量問題，它產生的直接原因是技術實現(xiàn)上的某種缺陷，如下圖所示。技術類數(shù)據(jù)質量問題主要產生在數(shù)據(jù)創(chuàng)建、數(shù)據(jù)獲取、數(shù)據(jù)傳遞、數(shù)據(jù)裝載、數(shù)據(jù)使用和數(shù)據(jù)維護等環(huán)節(jié)，具體描述如下：數(shù)據(jù)創(chuàng)建質量問題主要包括：業(yè)務系統(tǒng)數(shù)據(jù)延遲入庫、創(chuàng)建數(shù)據(jù)默認值不當和數(shù)據(jù)錄入的校驗規(guī)則不當，導致指標統(tǒng)計結果不一致、數(shù)據(jù)無效和記錄重復等；數(shù)據(jù)獲取質量問題主要包括：數(shù)據(jù)源不當、取數(shù)時間點不正確以及接口數(shù)據(jù)在獲取過程中失真。如：編碼轉換處理錯誤或精度不夠，導致指標統(tǒng)計結果不一致或數(shù)據(jù)無效等；數(shù)據(jù)傳遞質量問題主要包括：接口數(shù)據(jù)及時率低、接口數(shù)據(jù)漏傳和網絡傳輸過程不可靠，如包丟失、文件傳輸方式錯誤、傳輸技術問題和協(xié)議使用不當導致的數(shù)據(jù)不完整等；數(shù)據(jù)裝載質量問題主要包括：數(shù)據(jù)清洗算法、數(shù)據(jù)轉換算法、數(shù)據(jù)加載算法的錯誤和調度機制不合理等；數(shù)據(jù)使用質量問題主要包括：展示工具使用錯誤、展示方式不合理和展示周期不合理等；數(shù)據(jù)維護質量問題主要包括：數(shù)據(jù)備份/恢復錯誤、數(shù)據(jù)的存儲能力有限、維護過程缺乏驗證機制和人為后臺調整數(shù)據(jù)等。流程問題域流程類問題是指由于系統(tǒng)作業(yè)流程和人工操作流程設置不當造成的數(shù)據(jù)質量問題，如下圖所示。流程類問題主要來源于數(shù)據(jù)創(chuàng)建流程、數(shù)據(jù)傳遞流程、數(shù)據(jù)裝載流程、數(shù)據(jù)使用流程、數(shù)據(jù)維護流程和稽核流程等各環(huán)節(jié)，具體描述如下：數(shù)據(jù)創(chuàng)建流程質量問題主要指操作員數(shù)據(jù)錄入時缺乏審核流程；數(shù)據(jù)傳遞流程質量問題主要指通信流程溝通不暢；數(shù)據(jù)裝載流程質量問題主要指清洗流程缺乏/不當、調度流程邏輯錯誤、數(shù)據(jù)加載流程邏輯錯誤及數(shù)據(jù)轉換流程邏輯錯誤；數(shù)據(jù)使用流程質量問題主要指數(shù)據(jù)使用流程缺乏流程管理；數(shù)據(jù)維護流程質量問題主要指缺乏變更維護流程、缺乏錯誤數(shù)據(jù)維護流程、缺乏數(shù)據(jù)測試流程以及對人工后臺調整數(shù)據(jù)沒有嚴格的流程監(jiān)控；稽核流程質量問題主要指缺乏數(shù)據(jù)檢查及問題反饋流程。管理問題域管理類問題是指由于人員素質及管理機制方面的原因造成的數(shù)據(jù)質量問題，如下圖所示。管理類問題主要包括人員的管理、培訓和激勵等方面的措施不當導致的管理缺失。人員培訓所產生的質量問題主要指對數(shù)據(jù)質量相關人員缺少長期培訓計劃；人員管理所產生的質量問題主要指缺乏管理目標、責任人缺失或有關人員缺乏責任心和工作的優(yōu)先級安排不當；人員激勵所產生的質量問題主要指缺乏獎懲制度、獎懲制度的執(zhí)行不到位、激勵反饋渠道不暢和缺乏反饋機制。數(shù)據(jù)質量管理體系結構本章從功能結構和技術結構兩個方面簡單介紹了數(shù)據(jù)質量管理系統(tǒng)的體系結構，在功能結構一節(jié)簡要描述了各個層次的功能，在技術結構一節(jié)描述了各個組件的實現(xiàn)方式以及數(shù)據(jù)質量管理系統(tǒng)與相關外系統(tǒng)的關系。系統(tǒng)功能結構數(shù)據(jù)質量管理功能結構如下圖所示。數(shù)據(jù)質量管理系統(tǒng)功能按層次劃分為獲取層、存儲層以及功能層。下面簡要描述各層要求實現(xiàn)的功能：獲取層本層主要實現(xiàn)的是數(shù)據(jù)質量數(shù)據(jù)的采集功能。數(shù)據(jù)質量管理系統(tǒng)采集所需的質量監(jiān)控數(shù)據(jù)，它是數(shù)據(jù)質量功能和應用的基礎。采集的數(shù)據(jù)范圍有：關鍵實體信息采集、實體關系信息采集、明細匯總信息采集、關鍵指標信息采集以及元數(shù)據(jù)變更信息采集。存儲層存儲層中存儲的數(shù)據(jù)質量信息主要包括三個部分：數(shù)據(jù)質量規(guī)則庫：存儲數(shù)據(jù)質量系統(tǒng)的相關規(guī)則信息，包括數(shù)據(jù)質量配置規(guī)則（監(jiān)控的實體或域、監(jiān)控內容以及告警或報告推送配置）、數(shù)據(jù)質量校驗規(guī)則（質量校驗準則或表達式）、數(shù)據(jù)質量采集規(guī)則（獲取層的采集調度規(guī)則）；數(shù)據(jù)質量信息庫：存儲所有的數(shù)據(jù)質量采集信息、告警信息、報告內容以及數(shù)據(jù)據(jù)質量問題處理信息等；數(shù)據(jù)質量知識庫：存儲元數(shù)據(jù)變更監(jiān)控知識（介紹元數(shù)據(jù)內容、變更監(jiān)控的原理以及元數(shù)據(jù)變更監(jiān)控的實例等）、數(shù)據(jù)質量監(jiān)控知識（介紹數(shù)據(jù)質量管理系統(tǒng)提供的質量監(jiān)控方式、相應規(guī)則配置、哪些環(huán)節(jié)應當實施監(jiān)控以及一些監(jiān)控實例等）以及數(shù)據(jù)質量問題處理知識（記錄每次質量問題的原因、改善方法等，以便再次碰到這個問題時可有參考）。功能層功能層包含了數(shù)據(jù)質量管理系統(tǒng)的基礎功能，它為數(shù)據(jù)質量管理的服務提供了基本的功能支撐，主要包括以下五個部分的功能：數(shù)據(jù)質量監(jiān)控：數(shù)據(jù)質量監(jiān)控是根據(jù)配置的規(guī)則庫，對采集數(shù)據(jù)進行數(shù)據(jù)質量監(jiān)控，對發(fā)現(xiàn)的數(shù)據(jù)質量情況進行告警或形成報告的過程，包括關鍵實體監(jiān)控、實體關系監(jiān)控、明細匯總監(jiān)控、關鍵指標監(jiān)控、規(guī)則配置以及告警管理等功能。元數(shù)據(jù)變更監(jiān)控：元數(shù)據(jù)變更監(jiān)控可以使得相關人員獲取數(shù)據(jù)處理過程中的實體變更或者處理過程變更信息（尤其是源系統(tǒng)的變更），調用元數(shù)據(jù)管理系統(tǒng)的相關分析功能對實體變更信息進行影響分析，以對關鍵的變更信息進行及時報警，將會引起的質量問題盡早曝光。數(shù)據(jù)質量報告：數(shù)據(jù)質量報告是對數(shù)據(jù)質量管理各環(huán)節(jié)累積的各種信息進行匯總、梳理、統(tǒng)計和分析，形成統(tǒng)計報告的過程，基本功能主要包括：報告生成、報告推送和報告歸檔。數(shù)據(jù)質量知識庫：數(shù)據(jù)質量知識庫作為質量知識普及、質量監(jiān)控配置指南以及質量問題處理的經驗沉淀，希望對數(shù)據(jù)質量關注人員提供一些幫助，包括知識產生和知識應用。數(shù)據(jù)質量對外服務：數(shù)據(jù)質量對外服務負責數(shù)據(jù)質量管理系統(tǒng)與外部系統(tǒng)的信息交互。功能層的詳細說明與要求，詳見第5章。系統(tǒng)技術結構數(shù)據(jù)質量管理系統(tǒng)的技術結構包括數(shù)據(jù)質量存儲庫、功能組件（采集組件與分析組件）、數(shù)據(jù)質量控制臺和數(shù)據(jù)質量對外服務接口等部分，如下圖所示。數(shù)據(jù)質量存儲庫存儲數(shù)據(jù)質量規(guī)則庫、數(shù)據(jù)質量信息庫以及數(shù)據(jù)質量知識庫的所有數(shù)據(jù)。功能組件數(shù)據(jù)質量采集組件：數(shù)據(jù)質量采集組件是構成系統(tǒng)的重要組件。從數(shù)據(jù)源系統(tǒng)的數(shù)據(jù)文件通過接口機進入數(shù)據(jù)倉庫，并經過ETL處理、倉庫處理、數(shù)據(jù)集市處理、數(shù)據(jù)應用處理以及前端應用處理等環(huán)節(jié)，在每個數(shù)據(jù)處理環(huán)節(jié)中，均需要根據(jù)業(yè)務特點部署數(shù)據(jù)質量采集點，執(zhí)行與處理相關的數(shù)據(jù)采集功能。采集到的數(shù)據(jù)存儲在數(shù)據(jù)質量存儲庫中，并作為監(jiān)控檢查的輸入。數(shù)據(jù)質量分析組件：數(shù)據(jù)質量監(jiān)控告警：由數(shù)據(jù)質量采集組件輸入的采集數(shù)據(jù)，根據(jù)校驗規(guī)則進行質量校驗，判斷是否生成告警信息，推送告警，與USP交互，保存管理告警信息日志等。數(shù)據(jù)質量報告生成：由數(shù)據(jù)質量采集組件輸入的采集數(shù)據(jù)生成相關報告，推送報告，報告歸檔等。數(shù)據(jù)質量規(guī)則引擎：負責將用戶配置的數(shù)據(jù)質量規(guī)則庫，轉換為相應的可執(zhí)行的SQL代碼，并輸送給數(shù)據(jù)質量采集組件。元數(shù)據(jù)變更分析：負責和元數(shù)據(jù)管理系統(tǒng)的相關模塊進行交互，得到實體或處理過程的變更信息，調用影響分析接口，得到變更將會影響到的實體或處理過程，并將影響列表發(fā)送給關注人。數(shù)據(jù)質量控制臺數(shù)據(jù)質量控制臺是相關人員操作的界面，包括規(guī)則庫的配置、信息庫的查詢以及知識庫的管理等。控制臺界面可以通過Portlet/iFrame等方式嵌入到數(shù)據(jù)門戶中。數(shù)據(jù)質量對外服務接口對外服務接口是數(shù)據(jù)質量管理系統(tǒng)提供給外部使用的服務接口，通過接口調用可以實現(xiàn)數(shù)據(jù)質量告警或者報告的推送，與調度系統(tǒng)USP的交互，向元數(shù)據(jù)管理系統(tǒng)展示實體的數(shù)據(jù)質量信息等。數(shù)據(jù)質量管理詳細功能本章詳細說明元數(shù)據(jù)管理模塊的獲取層、存儲層和功能層的各項功能要求。數(shù)據(jù)質量監(jiān)控數(shù)據(jù)質量監(jiān)控是根據(jù)預先配置的規(guī)則或算法，進行監(jiān)控數(shù)據(jù)采集和規(guī)則校驗，并依據(jù)稽核和檢查過程中發(fā)現(xiàn)的數(shù)據(jù)質量異常情況進行告警的過程。數(shù)據(jù)質量監(jiān)控由四個主要功能環(huán)節(jié)構成，包括關鍵實體監(jiān)控、實體關系監(jiān)控、明細匯總監(jiān)控以及關鍵指標監(jiān)控。下面對每個功能環(huán)節(jié)分別進行說明。關鍵實體監(jiān)控關鍵實體監(jiān)控是對數(shù)據(jù)處理所有環(huán)節(jié)中的單個關鍵實體對象進行多方面的質量監(jiān)控。行數(shù)：關鍵實體數(shù)據(jù)行數(shù)的同比環(huán)比或者閥值監(jiān)控。分布：關鍵實體關鍵域的值分布，即特定取值的行數(shù)與總行數(shù)的比例，可以有同比環(huán)比或者閥值的監(jiān)控。空值：關鍵實體關鍵域的空值監(jiān)控，對實體關鍵域為空的行數(shù)進行監(jiān)控，可以有同比環(huán)比或者閥值的監(jiān)控。域范圍：關鍵實體關鍵域的取值范圍監(jiān)控，對實體關鍵域的取值范圍可以進行樣本數(shù)據(jù)采集，監(jiān)控其區(qū)間值或枚舉值是否合理。關鍵域匯總：關鍵實體關鍵域的匯總值監(jiān)控，可以有同比環(huán)比或者閥值的監(jiān)控。唯一性：關鍵實體業(yè)務鍵值的唯一性監(jiān)控，即監(jiān)控是否有關鍵業(yè)務數(shù)據(jù)的重復。時效性：關鍵實體業(yè)務的實效性監(jiān)控，即關鍵實體對象的加工完成時間點要符合一定的業(yè)務需求。實體關系監(jiān)控引用完整性監(jiān)控：關鍵實體對維表引用或者其它實體引用時，是否會造成業(yè)務數(shù)據(jù)的缺失。實體一致性監(jiān)控：多個業(yè)務相關的關鍵實體間的一致性監(jiān)控，即實體行數(shù)的對比。域匯總值關系監(jiān)控：多個關鍵實體的關鍵域的匯總值之間關系的監(jiān)控，如匯總值要匹配或者匯總值1+匯總值2=匯總值3等明細匯總監(jiān)控對關鍵實體和其匯總表的關鍵域分別進行匯總，對比匯總值，在業(yè)務平衡上要求其值基本一致，如訂單明細表的金額和訂單匯總表的金額對比。關鍵指標監(jiān)控對關鍵業(yè)務指標的監(jiān)控，包括指標波動、指標平衡以及閥值監(jiān)控。指標波動：對關鍵業(yè)務指標的值進行監(jiān)控，計算其同比、環(huán)比的波動，以及節(jié)假日對指標值的影響。指標平衡：對多個相關的業(yè)務指標進行平衡監(jiān)控，使其在業(yè)務層面上比較合理，如指標A=（B+C）×系數(shù)。指標閥值：對關鍵業(yè)務指標的閥值如果預先可以估計，則可以設置監(jiān)控，提前發(fā)現(xiàn)其異常值。元數(shù)據(jù)變更監(jiān)控源系統(tǒng)的業(yè)務流程變更或庫表、維度以及數(shù)據(jù)處理過程變更，可能會引起一系列潛在的數(shù)據(jù)質量問題。元數(shù)據(jù)變更監(jiān)控可以使得相關人員獲取數(shù)據(jù)處理過程中的實體變更或者處理過程變更信息（尤其是源系統(tǒng)的變更），調用元數(shù)據(jù)管理系統(tǒng)的相關分析功能對實體變更信息進行影響分析，以對關鍵的變更信息進行及時報警，將會引起的質量問題盡早曝光。數(shù)據(jù)質量報告數(shù)據(jù)質量報告是對數(shù)據(jù)質量管理系統(tǒng)累積的各種信息進行匯總、梳理、統(tǒng)計和分析，形成統(tǒng)計報告的過程。數(shù)據(jù)質量報告提供了一個集中展示數(shù)據(jù)倉庫數(shù)據(jù)質量狀況的窗口，數(shù)據(jù)質量關注人員對數(shù)據(jù)質量報告進行分析討論，以總結經驗、沉淀知識和改進方法，不斷提高數(shù)據(jù)倉庫的數(shù)據(jù)質量問題的處理能力。報告生成數(shù)據(jù)質量報告按照統(tǒng)計方式不同可以分為兩方面內容：數(shù)據(jù)質量事項列表報告和數(shù)據(jù)質量事項匯總統(tǒng)計分析報告。數(shù)據(jù)質量事項列表統(tǒng)計報告數(shù)據(jù)質量事項列表統(tǒng)計報告是對各種日常監(jiān)控的數(shù)據(jù)如告警、問題接收與處理、知識錄入等進行詳細列表統(tǒng)計的過程，包括對象名稱、發(fā)生時間、級別、狀態(tài)、結果等相關屬性信息。數(shù)據(jù)質量事項匯總統(tǒng)計報告數(shù)據(jù)質量事項匯總統(tǒng)計報告是對一段時間的監(jiān)控數(shù)據(jù)或質量評估的結果做匯總性分析的過程，包括但不限于以下：數(shù)據(jù)事項總數(shù)量：指在一定時間范圍內，出現(xiàn)數(shù)據(jù)質量事項的總數(shù)量（包括重復出現(xiàn)次數(shù)）；問題處理完成比率：指在一定時間范圍內，處理完成的數(shù)據(jù)質量問題數(shù)量與數(shù)據(jù)質量問題總數(shù)量的比值；問題平均處理時長：指在一定時間范圍內，數(shù)據(jù)質量問題處理總時長與數(shù)據(jù)質量問題總數(shù)量的比值；重大事項出現(xiàn)次數(shù)：指在一定時間范圍內，出現(xiàn)重大數(shù)據(jù)質量事項的次數(shù)；數(shù)據(jù)質量綜合評估：指綜合評估某一集合數(shù)據(jù)的質量狀況。報告發(fā)布質量報告根據(jù)不同數(shù)據(jù)源和不同周期定期或根據(jù)訂閱要求在質量報告模塊上進行發(fā)布。從時間周期上可分為日報告、周報告、月報告、季報告和年報告等，還可從報告級別或地域維度等維度對報告內容進行分類。數(shù)據(jù)質量報告的發(fā)布要求具備一定的時效性。數(shù)據(jù)質量報告的發(fā)布需與用戶的角色和權限對應，用戶應在所賦權限范圍內查看質量報告，數(shù)據(jù)質量報告按需采用界面或EMAIL等方式發(fā)送給相關質量關注人員。報告歸檔數(shù)據(jù)質量報告是數(shù)據(jù)質量子系統(tǒng)的一種知識沉淀方式，包括了數(shù)據(jù)質量管理各個環(huán)節(jié)的統(tǒng)計數(shù)據(jù)、分析結果和處理意見。數(shù)據(jù)質量報告的歸檔可以將相關報告按照分類如模塊、時間和級別等知識庫格式要求歸檔到數(shù)據(jù)質量知識庫中，作為后續(xù)數(shù)據(jù)質量問題處理和分析的參照。另外質量報告歸檔要求可以將報告導出成文件（Excel、Text或其他格式），存放到文件服務器中以方便查詢和調閱。數(shù)據(jù)質量知識庫數(shù)據(jù)質量知識主要來源于對數(shù)據(jù)質量問題的總結，同時，對數(shù)據(jù)質量問題的不同解決方案，以及對知識本身的評價，也是對數(shù)據(jù)質量知識的補充與完善。通過數(shù)據(jù)質量管理系統(tǒng)的知識庫管理界面可以提交數(shù)據(jù)質量知識。數(shù)據(jù)質量知識庫中包括了以下經驗的集合：元數(shù)據(jù)變更監(jiān)控知識（介紹元數(shù)據(jù)內容、變更監(jiān)控的原