ICS03.100.99

CCSA02

DB51

四川省地方標準

DB51/T3060—2023

四川省政務信息化后評價指南

Guidelineforpost-evaluationofgovernmentaffairsinformatization

insichuanprovince

2023-04-28發(fā)布2023-06-01實施

四川省市場監(jiān)督管理局發(fā)布

DB51/T3060—2023

目次

前言.................................................................II

引言................................................................III

1范圍......................................................................1

2規(guī)范性引用文件............................................................1

3術(shù)語和定義................................................................1

4符號和縮略語..............................................................1

5基本原則..................................................................1

5.1獨立性................................................................1

5.2客觀性................................................................2

5.3針對性................................................................2

5.4結(jié)構(gòu)性................................................................2

6評價方法..................................................................2

6.1基本方法..............................................................2

6.2綜合評價法............................................................2

6.3邏輯框架法............................................................2

6.4層次分析法............................................................2

7評價指標..................................................................2

7.1評價指標體系框架......................................................3

7.2投資決策與建設管理....................................................3

7.3運維水平..............................................................3

7.4應用效果..............................................................4

7.5項目效益..............................................................4

8評價程序..................................................................4

8.1基本程序..............................................................4

8.2前期準備..............................................................5

8.3項目應用機構(gòu)自評......................................................5

8.4實施評價..............................................................5

8.5評價報告撰寫..........................................................5

8.6評價結(jié)果應用..........................................................5

9評價組織管理..............................................................5

9.1總則..................................................................5

9.2獨立性................................................................6

9.3公正性................................................................6

9.4保密性................................................................6

附錄A（資料性）評價指標體系..........................................7

附錄B（資料性）采用層次分析法計算評價指標權(quán)重示例...................10

B.1層次分析法基本原理...................................................10

B.2采用層次分析法計算評價指標權(quán)重步驟...................................10

B.3采用層次分析法計算評價指標權(quán)重示例...................................11

I

DB51/T3060—2023

前言

本文件按照GB/T1.1—2020《標準化工作導則第1部分：標準化文件的結(jié)構(gòu)和起草規(guī)則》的規(guī)定起

草。

請注意本文件的某些內(nèi)容可能涉及專利。本文件的發(fā)布機構(gòu)不承擔識別專利的責任。

本文件由四川省發(fā)展和改革委員會提出、歸口并解釋。

本文件起草單位：四川省數(shù)字經(jīng)濟研究中心、四川省發(fā)展和改革委員會數(shù)字經(jīng)濟發(fā)展處、四川省

人民政府電子政務辦公室、西南交通大學、電子科技大學、四川大學

本文件主要起草人：王丹琛、李皓迪、肖楊梅、郭一蓓、牟昕、毛鵬宇、高笑笑、柳岸、宋晶、

王頡、廖丹、羅蕾、何星星、韋濤、方智陽。

本文件為首次發(fā)布。

II

DB51/T3060—2023

引言

四川省政務信息化后評價是在四川省政務信息化項目竣工驗收后，對項目的目標、執(zhí)行過程、結(jié)果、

效益、作用和影響進行系統(tǒng)、客觀的分析和總結(jié)的技術(shù)經(jīng)濟活動。其目的是總結(jié)經(jīng)驗，不斷提高項目投

資決策、工程實施和運維管理水平，并為制定相關(guān)政策等提供科學依據(jù)。為明確四川省政務信息化后評

價工作的原則、內(nèi)容、方法、程序，特制定本標準。

III

DB51/T3060—2023

四川省政務信息化后評價指南

1范圍

本文件規(guī)定四川省政務信息化后評價的原則、內(nèi)容、方法、程序和機構(gòu)。

本文件適用于策劃、組織、實施各種類型四川省政務信息化項目的后評價工作。

2規(guī)范性引用文件

下列文件中的內(nèi)容通過文中的規(guī)范性引用而構(gòu)成本文件必不可少的條款。其中，注日期的引用文件，

僅該日期對應的版本適用于本文件；不注日期的引用文件，其最新版本（包括所有的修改單）適用于本

文件。

GB/T23691—2009項目管理術(shù)語

GB/T25069—2022信息安全技術(shù)術(shù)語

GB/T25647—2010電子政務術(shù)語

3術(shù)語和定義

GB/T23691—2009、GB/T25069—2022、GB/T25647—2010界定的以及下列術(shù)語和定義適用于本文

件。

3.1

政務信息化后評價post-evaluationofgovernmentaffairsinformatization

對已竣工驗收政務信息化項目的目標、執(zhí)行過程、結(jié)果、效益、作用和影響等進行分析、總結(jié)和評

估的活動

4符號和縮略語

LFA，邏輯框架法（logicalframeworkapproach）

CE，綜合評價（ComprehensiveEvaluation）

AHP，層次分析法（AnalyticHierarchyProcess）

CI，一致性指標（ConsistencyIndex）

RI，隨機一致性指標（RandomIndex）

CR，一致性比例（ConsistencyRatio）

5基本原則

5.1獨立性

應由具備相應能力、獨立運行的機構(gòu)開展評價工作。

1

DB51/T3060—2023

5.2客觀性

應以事實為依據(jù)，客觀反映項目決策、項目管理、運行維護和系統(tǒng)應用的實際狀況，在可靠的文件

及明確的數(shù)據(jù)基礎(chǔ)上，實事求是地得出評價結(jié)論。

5.3針對性

應針對四川省政務信息化項目的具體特征選擇評價方法，綜合考慮項目類型、內(nèi)容、規(guī)模、復雜程

度等要素，確保分析方法和評價結(jié)論的科學性、適宜性。

5.4結(jié)構(gòu)性

應針對四川省政務信息化項目，綜合考慮業(yè)務結(jié)構(gòu)和數(shù)字化功能結(jié)構(gòu)，集合公共管理與IT技術(shù)等多

視角，做好科學解讀和綜合研判。

6評價方法

6.1基本方法

四川省政務信息化后評價主要采用定性和定量相結(jié)合的方法，包括綜合評價法、邏輯框架法、層次

分析法，以及國際國內(nèi)通行的其他方法等。具體項目的后評價方法應根據(jù)項目特征和后評價的要求，選

擇一種或多種方法對項目進行評價。

6.2綜合評價法

綜合評價法即多指標綜合評價方法，是指使用比較系統(tǒng)的、規(guī)范的方法對于多個指標、多個單位同

時進行評價的方法。綜合評價一般采取主客觀結(jié)合的方式，評價指標的選取和指標權(quán)重設置是關(guān)鍵。該

方法采用的計算方法需要考慮的問題比較復雜，但因其綜合性和系統(tǒng)性的顯著特點在實踐中廣泛應用。

計算機的普及降低了綜合評價的計算方法復雜度，增強了評價可操作性。

6.3邏輯框架法

邏輯框架法是一種設計、計劃和評價的方法，通過投入、產(chǎn)出、具體目標、宏觀目標四個層面對項

目進行分析和總結(jié)。從確定待解決的核心問題入手，向上逐級展開，得到其影響及后果，向下逐層推演

找出其引起的原因，得到“問題樹”，并將描述的因果關(guān)系轉(zhuǎn)換為相應的目標關(guān)系，得到“目標樹”和

對應的“規(guī)劃矩陣”。邏輯框架匯總了項目實施活動的全部要素，并按宏觀目標、具體目標、產(chǎn)出成果

和投入的層次歸納了投資項目的目標及其因果關(guān)系。

6.4層次分析法

層次分析法是指將一個復雜的多目標決策問題作為一個系統(tǒng)，將目標分解為多個目標或準則，進而

分解為多指標（或準則、約束）的若干層次，然后采取求解判斷矩陣特征向量的方法獲得每一層次的各

元素對上一層次某元素的優(yōu)先權(quán)重，最后用再加權(quán)求和的方式遞階歸并各目標對總目標的最終權(quán)重，以

作為目標（多指標）、多方案優(yōu)化決策的系統(tǒng)方法。在本標準附錄B中，提供了一個采用層次分析法計

算評價指標權(quán)重的示例。

7評價指標

2

DB51/T3060—2023

7.1評價指標體系框架

四川省政務信息化后評價指標包括投資決策與建設管理、運維水平、應用效果、項目效益四個方面。

四川省政務信息化后評價指標體系框架如圖1所示。系統(tǒng)的指標體系詳見附錄A。

四川省政務信息化項目后評價指標體系

投資決策與建設管理運維水平應用效果項目效益

信

業(yè)息

務網(wǎng)管資

應絡理源

項項資項運

用和和共

目目源目維應社經(jīng)應

集數(shù)政享

投建利運組用會濟用

約據(jù)務及

資設用行織程效效前

化安服數(shù)

決管水狀保度益益景

發(fā)全務據(jù)

策理平?jīng)r障

展保效歸

水障能集

平效

果

圖1四川省政務信息化后評價指標體系框架

7.2投資決策與建設管理

7.2.1項目投資決策

項目投資決策主要根據(jù)項目實施完成的實際情況，對項目立項決策事項進行評價。

7.2.2項目建設管理

項目建設管理主要評價項目建設實施管理的水平。

7.2.3資源利用水平

資源利用水平主要對項目系統(tǒng)實際運行過程中網(wǎng)絡、計算、存儲等資源實際使用率與建成的能力進

行比較評價。

7.2.4業(yè)務應用集約化發(fā)展水平

業(yè)務應用集約化發(fā)展水平主要評價項目系統(tǒng)與內(nèi)外部其他信息系統(tǒng)的協(xié)同開發(fā)的程度。

7.3運維水平

7.3.1項目運行情況

項目運行情況主要評價項目實際運行的情況。

7.3.2運維組織保障

運維組織保障主要評價項目運維的資金、組織和隊伍的保障水平。

3

DB51/T3060—2023

7.3.3網(wǎng)絡和數(shù)據(jù)安全保障

網(wǎng)絡和數(shù)據(jù)安全保障主要評價項目運行維護過程中網(wǎng)絡系統(tǒng)和數(shù)據(jù)安全的保障水平。

7.4應用效果

7.4.1應用程度

應用程度主要評價項目對業(yè)務的支撐力度、系統(tǒng)功能應用頻次及受益者滿意程度。

7.4.2管理和政務服務效能

管理和政務服務效能主要評價項目對政務目標的實現(xiàn)程度、業(yè)務辦理效率提升及改善程度。

7.4.3信息資源共享及數(shù)據(jù)歸集效果

信息資源共享及數(shù)據(jù)歸集效果主要評價信息數(shù)據(jù)質(zhì)量以及信息數(shù)據(jù)開放共享水平。

7.5項目效益

7.5.1社會效益

社會效益主要對項目系統(tǒng)使用以后產(chǎn)生的社會效益進行評價。

7.5.2經(jīng)濟效益

經(jīng)濟效益主要對項目系統(tǒng)使用以后產(chǎn)生的經(jīng)濟效益進行評價。

7.5.3應用前景

應用前景主要評價項目創(chuàng)新能力以及應用的可持續(xù)性、可推廣性。

8評價程序

8.1基本程序

四川省政務信息化后評價包括前期準備、應用機構(gòu)自評、實施評價、評價報告撰寫、評價結(jié)果應用

五個階段。

四川省政務信息化后評價程序如圖2所示。

4

DB51/T3060—2023

項目應用

前期準備實施評價評價報告撰寫評價結(jié)果應用

機構(gòu)自評

編寫并提交

確定評價對象收集文件資料撰寫初步報告評價結(jié)果反饋

自評報告

提交相關(guān)

成立評價小組審核文件資料修改初步報告問題整改

文件資料

制定評價

現(xiàn)場測評提交正式報告評價結(jié)果應用

工作方案

收集項目

綜合分析建立檔案

基礎(chǔ)資料

形成評價

指標體系

制定評價

相關(guān)文本

圖2四川省政務信息化后評價程序

8.2前期準備

前期準備主要工作包括：確定評價對象、成立評價小組、制定評價工作方案、收集項目基礎(chǔ)資料、

形成評價指標體系、制定評價相關(guān)文本等。

8.3項目應用機構(gòu)自評

項目應用機構(gòu)根據(jù)自評報告范本，編寫并提交自評報告，并按要求提交相關(guān)文件資料。

8.4實施評價

實施評價階段的主要工作包括：收集文件資料、審核文件資料、現(xiàn)場測評、綜合分析等。

8.5評價報告撰寫

評價報告撰寫階段主要工作包括：撰寫初步報告、修改初步報告、提交正式報告、建立檔案等。

8.6評價結(jié)果應用

評價結(jié)果應用階段主要開展評價結(jié)果反饋、問題整改以及評價結(jié)果的采信應用等。

9評價組織管理

9.1總則

后評價機構(gòu)應具有明確的法律地位，應有文件描述其職能和從事技術(shù)相關(guān)應用咨詢的能力范圍。

5

DB51/T3060—2023

9.2獨立性

后評價機構(gòu)應獨立于所涉及的各方，不應是其評價項目的設計方、集成方、供應商、監(jiān)理方和運維

方，也不應是上述任何一方的授權(quán)代表。

9.3公正性

開展后評價的人員應不受可能影響其判斷的來自商業(yè)、財務和其他壓力的影響，應嚴格執(zhí)行工作程

序確保評價的結(jié)果不受評價機構(gòu)以外的人員或組織的影響。

9.4保密性

后評價機構(gòu)應確保對后評價活動過程中獲得的信息保密。

6

DB51/T3060—2023

附錄A

（資料性）

評價指標體系

評價指標體系的詳細情況如表A.1所示。

表A.1評價指標體系

一級二級

一級一級指二級三級指

指標指標二級指標說明三級指標三級指標說明

指標標說明指標標編號

編號編號

評價項目的立項實施是否符合

黨中央、國務院和省委、省政

1-1-1政策銜接

府要求，是否符合相關(guān)政府規(guī)

根據(jù)項目實施劃及法律法規(guī)的要求

項目完成的實際情評價項目技術(shù)方案的先進性，

1-1投資況，對項目立與項目單位內(nèi)部其他信息系統(tǒng)

1-1-2技術(shù)方案

決策項決策事項進技術(shù)路線的兼容適配性，以及

行評價與批復文件技術(shù)方案的差異

評估項目應用自主可控軟硬件

自主可控

1-1-3的情況，以及項目批復文件及

水平

實際建設情況的差異

評價項

評價項目招標采購方案中技術(shù)

目投資1-2-1招標采購

投資項目評價項目建設參數(shù)設置的合理性

決策

決策1-2建設實施管理的水1-2-2驗收整改評價項目驗收整改情況及效果

以及項

1與管理平評價項目實施、運行、維護過

目建設1-2-3檔案管理

建設程中檔案管理的規(guī)范情況

管理的

管理請求響應評價項目確定的系統(tǒng)請求響應

水平和在項目系統(tǒng)運1-3-1

能力利用率能力和利用率的目標實現(xiàn)程度

能力行時，通信、

資源計算處理評價項目確定的業(yè)務計算處理

計算等資源實1-3-2

1-3利用能力利用率能力和利用率的目標實現(xiàn)程度

際使用率與建

水平評價項目確定的信息系統(tǒng)數(shù)據(jù)

成的能力進行數(shù)據(jù)存儲

1-3-3存儲能力和利用率的目標實現(xiàn)

比較評價能力利用率

程度

業(yè)務評價項目系統(tǒng)與項目單位外部

外部

應用評價項目系統(tǒng)與1-4-1的其他信息系統(tǒng)之間協(xié)同開發(fā)

協(xié)同程度

集約內(nèi)外部其他信息的程度

1-4

化發(fā)系統(tǒng)的協(xié)同開發(fā)評價項目系統(tǒng)與項目單位內(nèi)部

內(nèi)部

展水的程度1-4-2的其他信息系統(tǒng)之間協(xié)同開發(fā)

整合程度

平的程度

7

DB51/T3060—2023

表A.1評價指標體系（續(xù)）

一級二級

一級一級指二級三級指

指標指標二級指標說明三級指標三級指標說明

指標標說明指標標編號

編號編號

評估項目系統(tǒng)完成要求的功能

2-1-1系統(tǒng)可用性

的能力

項目

評價項目實際評估項目系統(tǒng)在運行過程中的

2-1運行2-1-2系統(tǒng)可靠性

運行的情況連續(xù)正常運行情況

情況

系統(tǒng)

2-1-3評價項目系統(tǒng)升級與更新頻次

可升級性

運維評價項目申請維保資金的規(guī)范

評價項目運維2-2-1

評價項運維制度保障性、合理性等

的資金、組織

目系統(tǒng)2-2組織評價運維服務在崗人員、技術(shù)

和隊伍的保障運維

運維的運維保障2-2-2能力，及使用方對第三方服務

2水平隊伍保障

水平能力商的監(jiān)督制度建立及落實情況

和保障評價項目系統(tǒng)達到的信息安全

等級分級

水平2-3-1和信息系統(tǒng)等級或分級保護等

保護水平

網(wǎng)絡評價項目運行級

和維護過程中網(wǎng)網(wǎng)絡系統(tǒng)評價項目系統(tǒng)運行防護能力和

2-3-2

2-3數(shù)據(jù)絡系統(tǒng)和數(shù)據(jù)安全保障安全管理規(guī)范實施的有效性

安全的安全保障水數(shù)據(jù)評價項目數(shù)據(jù)開放應用安全技

2-3-3

保障平安全保障術(shù)防護和管理體系的有效性

商用密碼評價項目商用密碼應用的合規(guī)

2-3-4

應用性評估性和有效性

評價項目實際應用的系統(tǒng)功能

評價項目對業(yè)3-1-1功能應用率

模塊的覆蓋率以及使用頻次

務的支撐力

應用評價項目實際應用機構(gòu)/用戶數(shù)

3-1度、系統(tǒng)功能3-1-2用戶覆蓋率

評價項程度量的情況

應用頻次及

目滿足受益者

受益者滿意度3-1-3項目系統(tǒng)受益者的滿意程度

業(yè)務需滿意度

應用求的能公共服務評價項目對改善公共服務普惠

33-2-1

效果力和信普惠改善程度成效的貢獻

管理

息資源評價項目實現(xiàn)秩序類公共事務

和評價項目對提

共享的機制秩序管理轉(zhuǎn)型，改善競爭、博弈及

3-2政務升政務效能的3-2-2

水平改善程度合作活動秩序，維護協(xié)同機制

服務貢獻度

健康的貢獻

效能

業(yè)務評價系統(tǒng)使用后的業(yè)務辦理流

3-2-3

流程和質(zhì)量程和業(yè)務辦理質(zhì)量提升情況

8

DB51/T3060—2023

表A.1評價指標體系（續(xù)）

一級二級

一級一級指二級三級指

指標指標二級指標說明三級指標三級指標說明

指標標說明指標標編號

編號編號

評價信息系統(tǒng)中的數(shù)據(jù)是否符

合相關(guān)標準和數(shù)據(jù)規(guī)范，或者

3-3-1數(shù)據(jù)標準化

項目制定了新的標準規(guī)范，以

及標準規(guī)范的使用程度

評價項目系統(tǒng)內(nèi)部以及與內(nèi)外

信息部其他信息系統(tǒng)之間對同一業(yè)

3-3-2數(shù)據(jù)一致性

資源務對象的描述在編碼、格式、

共享含義等方面的一致性

及評價項目系統(tǒng)在數(shù)據(jù)采集、加

3-3-3數(shù)據(jù)時效性工、計算和展示方面的及時性，

評價信息數(shù)據(jù)

是否在規(guī)定時間內(nèi)更新信息

質(zhì)量以及信息

3-3數(shù)據(jù)共享評價項目確定的部門間數(shù)據(jù)共

數(shù)據(jù)開放共享3-3-4

接口部署率享接口的部署情況

水平

提供共享評價項目提供給其他部門的數(shù)

3-3-5

數(shù)據(jù)信息量據(jù)信息量及共享數(shù)據(jù)方式

數(shù)據(jù)提供數(shù)據(jù)評價項目為其他部門提供數(shù)據(jù)

3-3-6

歸集服務頻次服務的情況

效果評價項目與內(nèi)外部其他信息系

數(shù)據(jù)共享

統(tǒng)之間數(shù)據(jù)共享機制建設，以

3-3-7機制及應用

及實際利用數(shù)據(jù)處理支撐平臺

平臺

的情況

信息資源評價項目實際利用內(nèi)外部其他

3-3-8

利用率信息系統(tǒng)數(shù)據(jù)的次數(shù)和頻度

促進政府評價項目促進政府職能轉(zhuǎn)變方

評價項目系統(tǒng)4-1-1

社會職能轉(zhuǎn)變面的效益

4-1使用以后產(chǎn)生

效益提高評價項目提高辦事效率方面的

的社會效益4-1-2

辦事效率效益

評價項

提高評價項目提高工作效率方面的

目建設評價項目系統(tǒng)4-2-1

經(jīng)濟工作效率效益

的經(jīng)濟4-2使用以后產(chǎn)生

項目效益節(jié)約評價項目節(jié)約行政成本方面的

4社會效的經(jīng)濟效益4-2-2

效益行政成本效益

益以及

項目

應用4-3-1評價建設應用后形成的創(chuàng)新點

評價項目創(chuàng)新創(chuàng)新能力

前景

應用能力以及應用項目試點評價項目的試點示范推廣應用

4-34-3-2

前景的可持續(xù)性、示范推廣情況

可推廣性表彰

4-3-3評價項目取得的表彰獲獎情況

獲獎情況

9

DB51/T3060—2023

附錄B

（資料性）

采用層次分析法計算評價指標權(quán)重示例

B.1層次分析法基本原理

層次分析法根據(jù)問題的性質(zhì)和要達到的總目標，將問題分解為不同的組成元素，并按照元素間的相

互關(guān)聯(lián)影響以及隸屬關(guān)系將元素按不同層次聚集組合，形成一個多層次的分析結(jié)構(gòu)模型，從而最終使問

題歸結(jié)為最低層（供決策的方案、措施等）相對于最高層（總目標）的相對重要權(quán)值的確定或相對優(yōu)劣

次序的排定。

具體到本計算示例，得到四川省政務信息化后評價結(jié)果（用得分表示）是總目標，投資決策與建設

管理、運維水平、應用效果、項目效益等四個一級指標為組成元素。本計算示例采用層次分析法計算各

評價指標的權(quán)重。

B.2采用層次分析法計算評價指標權(quán)重步驟

（1）建立層次結(jié)構(gòu)模型

將決策的目標、考慮的元素（決策準則）和決策對象按它們之間的相互關(guān)系分為最高層、中間層和

最低層，繪出層次結(jié)構(gòu)圖。最高層是指決策的目的、要解決的問題。最低層是指決策時的備選方案。中

間層是指考慮的元素、決策的準則。對于相鄰的兩層，稱高層為目標層，低層為元素層。

（2）構(gòu)造判斷矩陣

在確定各層次各元素之間的權(quán)重時，采用一致矩陣法，即不把所有元素放在一起比較，而是兩兩相

互比較。采用相對尺度可以盡可能減少性質(zhì)不同的諸元素相互比較的困難，并提高準確度。

如對某一準則，對其下的各方案進行兩兩對比，并按其重要性程度評定等級。表示對于上層元

素而言，下層元素和相對重要性的數(shù)值，表B.1列出9個重要性等級及其賦值。按兩兩比較結(jié)果構(gòu)

成的矩陣稱作判斷矩陣。判斷矩陣具有如下性質(zhì)：

=

判斷矩陣元素的標度方法如下表B.1所示。

表B.1比例標度表

元素i比元素j量化值

同等重要1

稍微重要3

較強重要5

強烈重要7

極端重要9

兩相鄰判斷的中間值2，4，6，8

（3）一致性檢驗

對于上一步構(gòu)造的判斷矩陣，需要檢驗其一致性，以保證后續(xù)做出的排序和決策是可靠的。判斷矩

陣一致性是指滿足條件，它反映了兩兩比較判斷之間是協(xié)

10

DB51/T3060—2023

調(diào)一致、不矛盾的。由于實際問題的復雜性和不確定性，特別是涉及的元素較多時，構(gòu)造的判斷矩陣可

能不完全滿足上述一致性。為此，提出了判斷矩陣只要滿足“滿意一致性”，就可以進入下一步操作。

具體的“滿意一致性”計算方法：對每一個判斷矩陣求其最大特征根及一致性指標：

再計算一致性比例: