數(shù)字圖書館評價指標體系

數(shù)字圖書館作為基于網(wǎng)絡環(huán)境的一種新的信息資源組織與服務方式，自20世紀90年代以來，在世界一些主要發(fā)達國家，乃至發(fā)展中國家都取得了長足發(fā)展。我國的數(shù)字圖書館當前也正處于快速發(fā)展階段，一些重要的國家級數(shù)字圖書館，如國家數(shù)字圖書館、國家科學數(shù)字圖書館、中國高等教育數(shù)字圖書館、中共中央黨校數(shù)字圖書館、中國農(nóng)業(yè)數(shù)字圖書館等，都正在建設或服務過程中。在建或服務中的行業(yè)性、地區(qū)性數(shù)字圖書館項目更是如雨后春筍。盡管各國政府都對數(shù)字圖書館投入大量人力、物力和財力，但是數(shù)字圖書館在很大程度上仍然無法滿足用戶的信息需求。數(shù)字圖書館建設者、開發(fā)者及數(shù)字圖書館服務提供者與用戶之間存在著認知和理解的差異，這種差異造成用戶在使用數(shù)字圖書館時無法獲得有效服務，導致數(shù)字圖書館的效用受到制約。數(shù)字圖書館評價提供了這樣一種方法、手段和機會，使數(shù)字圖書館的設計者、操作者和用戶能通過評價來達到有效的溝通，以取得對數(shù)字圖書館理解的相對一致性，使數(shù)字圖書館具有更強的可用性，能更好地為用戶服務，提高數(shù)字圖書館有效性。對數(shù)字圖書館評價的研究可以為數(shù)字圖書館系統(tǒng)工程的開發(fā)和部署提供決策參考，有助于檢驗一個數(shù)字圖書館為其用戶提供的服務效用如何，從而引導數(shù)字圖書館的建設及其健康發(fā)展。1國內外數(shù)字圖書館評價項目及其評價指標與數(shù)字圖書館建設實踐相比，數(shù)字圖書館評價方面的研究與實踐還不夠成熟。從目前現(xiàn)狀來看，對數(shù)字圖書館進行全面系統(tǒng)的綜合評價研究的項目并不多，大多是從電子館藏、電子資源使用、電子資源服務等方面對數(shù)字圖書館建設的某一領域進行評價研究及實踐。1.1國外項目及評價指標國外數(shù)字圖書館評價方面的成果主要集中在研究項目和標準規(guī)范兩大方面。研究項目方面具有代表性的主要有以電子資源及其使用評價為主的E-Metrics項目、以數(shù)字圖書館服務質量評價為主的DigiQUAL項目、以電子服務績效評價及評價工具為主的EQUINOX項目等；標準規(guī)范主要有ISO2789﹕2006《信息與文獻國際圖書館統(tǒng)計》(其中附件A是電子圖書館服務使用評價)以及COUNTER網(wǎng)絡電子資源在線使用統(tǒng)計等。(1)E-Metrics項目E-Metrics項目，即電子圖書館評價項目，是2000年美國研究圖書館學會(簡稱ARL)啟動的，旨在建立一套研究圖書館的電子資源及其使用的科學測度指標體系。E-Metrics項目的評價指標分為5類，共設置20個評價指標，其中包括17個統(tǒng)計指標和3個績效指標。見表1[1]。(2)DigiQUAL項目DigiQUAL項目是在SERVQUAL、LibQUAL+的基礎上發(fā)展起來的。SERVQUAL是一套應用于各類服務性機構的用戶滿意度測評體系，包括指標和方法；LibQUAL+是ARL對SERVQUAL進行“圖書館化”修正研究而形成的對于傳統(tǒng)圖書館服務質量進行評價的體系方法；而DigiQUAL是ARL為評價美國國家科學數(shù)字圖書館(簡稱NSDL)而開展的對數(shù)字圖書館服務質量評價進行研究的項目。該項目經(jīng)過試驗確定了評價數(shù)字圖書館服務質量的3個維度12個主題。3個維度是服務效果(effectofservice)、信息控制(informationcontrol)、數(shù)字圖書館環(huán)境(libraryasplace)；12個主題是可獲取性(accessibility)、導航性(navigability)、互操作性(interoperability)、館藏建設(collectionbuilding)、資源使用(resourceuse)、評價館藏(evaluatingcollections)、數(shù)字圖書館用戶社區(qū)(DLascommunityforusers)、數(shù)字圖書館開發(fā)者社區(qū)(DLascommunityfordevelopers)、數(shù)字圖書館評論者社區(qū)(DLascommunityforreviewers)、版權(copyright)、聯(lián)邦作用(roleoffederations)、數(shù)字圖書館可持續(xù)性(DLsustainability)[2]。(3)EQUINOX項目EQUINOX項目，即歐洲圖書館績效評價和質量管理系統(tǒng)項目，是針對歐洲圖書館發(fā)展和利用新的網(wǎng)絡及電子資源的現(xiàn)狀，基于傳統(tǒng)評價，在質量管理的框架內開展的研究工作，項目包括兩部分內容：一部分是設計一套用于普通復合圖書館電子服務績效評價的指標體系：另一部分是設計一個用于質量管理與績效評價的軟件工具，圖書館可以將有關實際績效和操作的原始數(shù)據(jù)輸入系統(tǒng)，該系統(tǒng)利用這些數(shù)據(jù)可以計算出圖書館的績效指標及預定目標的完成情況。EQUINOX項目的圖書館電子服務績效評價指標的設計目的是為了加強和完善ISO11620《信息與文獻圖書館績效指標》中傳統(tǒng)圖書館服務的評價指標體系，以適應網(wǎng)絡環(huán)境下圖書館對電子服務績效評價的要求。項目最初形成的圖書館電子服務績效評價指標體系包括34個指標，進一步的研究討論認識到這些指標中的一部分歸入ISO11620標準中定義的傳統(tǒng)指標更合理，還有的一些指標由于可獲取性很差也被去掉了，最后于2000年12月形成了由14個指標組成的圖書館電子服務績效評價指標體系。見表2[3]。(4)ISO2789：2006附件AISO2789：2006《信息與文獻國際圖書館統(tǒng)計》附件A：電子圖書館服務使用評價，主要是針對圖書館傳統(tǒng)服務以外的電子服務的統(tǒng)計及評價，定義了電子圖書館服務的各種形式、電子信息資源的各種形式、電子服務利用的各種形式。內容包括電子館藏的評估(Measuringtheelectroniccollection)、利用評估(Measuringuse)、電子服務(Electronicservices)、電子服務利用(Useofelectronicservices)、數(shù)據(jù)調查(Surveydata)等幾大方面。(5)COUNTER網(wǎng)絡電子資源在線使用統(tǒng)計COUNTER網(wǎng)絡電子資源在線使用統(tǒng)計是由圖書館界、出版界和中間商共同發(fā)起的研究項目，其目的在于為在線信息服務商和用戶提供可靠的、一致的、兼容的使用統(tǒng)計標準和方案。COUNTER目前已先后發(fā)布了“期刊和數(shù)據(jù)庫實施規(guī)范”及“圖書和參考資料實施規(guī)范”?！禖OUNTER期刊和數(shù)據(jù)庫實施規(guī)范》(第二版)規(guī)定了期刊的4個使用報告及數(shù)據(jù)庫的3個使用報告。即期刊報告1：每月、每種期刊成功的全文請求量：期刊報告2：每月、每種期刊被拒絕的全文請求量；期刊報告3：每月、每種期刊、每種頁面類型的各項請求與被拒絕量；期刊報告4：每月、每個集合的總的檢索次數(shù)，包括被保存的、被修改的，以及檢索結果為零的檢索次數(shù)；數(shù)據(jù)庫報告1：每月、每種數(shù)據(jù)庫的總的檢索及會話量；數(shù)據(jù)庫報告2：每月、每種數(shù)據(jù)庫的被拒絕請求量；數(shù)據(jù)庫報告3：每月、每個集合的總的檢索及會話量。《COUNTER圖書和參考資料實施規(guī)范》(第一版)規(guī)定了出版商必須提交的6個使用報告，即圖書報告1：每月、每個題名成功題名請求量；圖書報告2：每月、每個題名成功章節(jié)請求量；圖書報告3：每月、每個題名拒絕請求量：圖書報告4：每月、每種資源拒絕請求量；圖書報告5：每月、每個題名總檢索和訪問量；圖書報告6：每月、每種資源總檢索和訪問量[4]。從以上幾個研究項目及標準規(guī)范設置的評價指標可以看出，國外比較注重資源及其服務方面的評價，大多數(shù)評價項目及其指標都是基于此來設計考慮的。各項目或標準的評價指標設計比較實用，不只是理論上的探討或是理想化的設計，定量與定性評價相結合，有些項目已充分考慮了數(shù)據(jù)的獲取和分析，具有很強的操作性。1.2國內項目及評價指標國內學者對數(shù)字圖書館評價的研究近年來也取得了一些成果，分別提出了一些評價標準及指標體系，但大多還局限在理論研究層面，進入可操作層面的研究成果較少，尤其是缺乏系統(tǒng)的對大型數(shù)字圖書館建設的綜合評價以及對多個數(shù)字圖書館建設的比較評價研究。國內研究成果的評價指標設置一般較為全面，但對指標獲取、數(shù)據(jù)分析等方面研究不夠，這也導致了評價指標缺乏可操作性。王海娟在《數(shù)字圖書館評價指標體系初探》一文中提出了將數(shù)字圖書館評價指標體系分為館藏、技術、服務、管理四個方面，并提出了具體的評價要素和指標。館藏評價包括館藏自身情況(豐富性、可靠性、持久性、適用性、特色化)、館藏組織情況(組織方式多樣化、組織工具多樣化、元數(shù)據(jù)的標準化、元數(shù)據(jù)的詳盡程度)、館藏管理情況(更新速度、資源整合能力、可持續(xù)發(fā)展能力)；技術評價包括系統(tǒng)技術(網(wǎng)絡通信能力、安全性、互操作性)、信息檢索技術(檢索性能、檢索技巧)、用戶服務技術(用戶操作技術的全面性、多語言支持能力、個性化服務能力)、界面設計(美感度、友好程度、導航功能)；服務評價包括服務范圍、服務質量(信息檢索效果、參考服務水平、服務的可獲取性)：管理評價包括版權管理、標準化管理、合作與共享管理、經(jīng)濟效益管理、人員管理[5]。常春在《數(shù)字圖書館項目評價研究》一文中提出了從用戶角度、資源角度、系統(tǒng)角度、管理角度的數(shù)字圖書館項目評價的主要內容。從用戶角度評價內容包括用戶服務偏好、用戶資源偏好、用戶查詢信息目的、網(wǎng)站日志分析、用戶滿意度、用戶對評價的數(shù)字圖書館的認知度、目標用戶使用率、用戶動搖率、用戶培訓投入、多語言支持能力等；從資源角度評價內容包括資源規(guī)模、資源采購的經(jīng)濟性、資源對領域的覆蓋率、資源質量、更新速度、知識挖掘深度、知識組織整合與揭示、資源的實用性等、數(shù)據(jù)格式的標準性、資源平均使用率、資源發(fā)展投入；從系統(tǒng)角度評價內容包括用戶界面的易用性和美感度、系統(tǒng)的互操作性、系統(tǒng)響應時間、同類網(wǎng)站比較、系統(tǒng)實現(xiàn)和維護的標準化程度、系統(tǒng)運行的安全性、資源的保存技術、資源的檢索技術、虛擬參考咨詢運行情況、館際互借實現(xiàn)情況、聯(lián)合目錄查詢功能、系統(tǒng)服務器等硬件設備評價、系統(tǒng)設備投入、資源災害保護等；從管理角度評價內容包括項目人員設置、知識產(chǎn)權的使用和保護、標準規(guī)范的遵循與建立、合作與共享的規(guī)劃、用戶人均服務成本、用戶培訓計劃和實施、用戶意見反饋機制、管理檔案是否規(guī)范、管理成本投入、經(jīng)費管理等[6]。劉煒等人在《數(shù)字圖書館評估研究》一文中提出了“數(shù)字圖書館評估指標體系大綱(一、二級)”，按照數(shù)字資源、服務、管理和用戶感知四方面的測度，給出了一、二兩級指標的簡單說明。數(shù)字資源方面的一、二級指標包括二次文獻數(shù)據(jù)庫數(shù)量(自建二次文獻數(shù)據(jù)庫數(shù)量、二次文獻數(shù)據(jù)庫保有量)、全文數(shù)據(jù)庫數(shù)量(自建全文數(shù)據(jù)庫數(shù)量、全文數(shù)據(jù)庫保有量)、多媒體數(shù)據(jù)庫數(shù)量(自建多媒體數(shù)字資源數(shù)量)、自建數(shù)字資源總量；服務方面的一二級指標包括供讀者使用的計算機數(shù)量(供讀者使用的上網(wǎng)計算機數(shù)量、無線上網(wǎng)服務)、網(wǎng)上參考工作提問數(shù)量(網(wǎng)上參考工作回答滿意度)、網(wǎng)頁/資源訪問數(shù)(網(wǎng)頁/資源訪問用戶數(shù)、資源查詢數(shù)量)、注冊用戶數(shù)(注冊用戶占目標用戶比例、注冊用戶使用率)、資源下載數(shù)(人均資源下載數(shù))；管理方面的一二級指標包括電子資源總支出(電子資源支出占總資源支出的比例、資源使用單位成本、資源使用單位時間、電腦使用率)、資源使用的用戶培訓數(shù)量(受訓人數(shù)所占比例)、工作人員培訓情況；用戶感知方面的指標包括滿意度[7]。吳建華設計的“211大學數(shù)字圖書館評價指標體系”經(jīng)過多次咨詢征集專家意見，設置了5個一級指標，24個二級指標。一級指標包括基礎設施、資源配置、資源組織、資源利用、服務功能。其中基礎設施包括5個二級指標，即網(wǎng)絡帶寬/出口速度、無線上網(wǎng)總量最大并發(fā)用戶數(shù)、服務器數(shù)量、存儲總容量、讀者用計算機數(shù)量；資源配置包括4個二級指標，即綜合數(shù)據(jù)庫配置率、專業(yè)數(shù)據(jù)庫對學科的覆蓋率、數(shù)據(jù)庫經(jīng)費占圖書經(jīng)費的比例、電子圖書及參考資料的數(shù)量；資源組織包括5個二級指標，即大學館藏資源目錄上網(wǎng)比例、電子資源整合入OPAC的比例、電子期刊導航、數(shù)據(jù)庫導航、自建數(shù)字資源；資源利用包括5個二級指標，即圖書館網(wǎng)站訪問量、數(shù)據(jù)庫訪問量、數(shù)字資源下載量、文獻傳遞傳入量、文獻傳遞傳出量；服務功能包括5個二級指標，即用戶在校外資源的可訪問性、統(tǒng)一檢索、虛擬參考咨詢臺、個人數(shù)字圖書館、網(wǎng)上讀者培訓課程[8]。2評價指標體系構建目的及原則2.1目的圖書館評價與評估，最初主要是借鑒企業(yè)管理的經(jīng)驗，將其引入圖書館科學管理。國外圖書館評價與評估的理論與方法的應用始于20世紀40年代，在我國則始于20世紀80年代。圖書館評價與評估，是通過統(tǒng)一的標準與規(guī)范，對圖書館整體工作效果與效率進行考量與評價，最終達到衡量圖書館服務“產(chǎn)品”的質量，把握圖書館自身存在的社會價值，為提高圖書館科學管理決策提供依據(jù)。圖書館在不同歷史時期的評價指標的內容，可以反映出某一個時期的圖書館工作的內涵，進而促進圖書館建設與發(fā)展。借鑒傳統(tǒng)圖書館評價與評估理念、方法，并將其應用到數(shù)字圖書館領域，建立一套數(shù)字圖書館評價指標體系，從而為數(shù)字圖書館確定規(guī)范、科學、統(tǒng)一的評價標準，制定系統(tǒng)、全面、易獲取、易量化的評價指標，并按照科學的評價方法對數(shù)字圖書館進行評價。數(shù)字圖書館評價將有助于提高數(shù)字圖書館管理與決策水平，改進數(shù)字圖書館業(yè)務工作，改善數(shù)字圖書館服務，促進數(shù)字圖書館的發(fā)展。數(shù)字圖書館的發(fā)展與網(wǎng)絡和新技術的發(fā)展緊密相連，發(fā)展速度比較快。在數(shù)字圖書館的建設與發(fā)展過程中，就對其進行評價與評估理論與指標體系的研究，對于數(shù)字圖書館的發(fā)展將起到很好的推動作用。2.2原則數(shù)字圖書館是一個復雜的信息系統(tǒng)，其建設主體、建設內容、用戶群體均較為復雜，并且隨著技術的發(fā)展、理念的更新，其資源、服務、技術、管理等各方面也在不斷發(fā)展完善之中，對其進行系統(tǒng)評價具有一定的難度，是一項頗具挑戰(zhàn)性的工作。作者認為，數(shù)字圖書館評價指標體系構建要遵循以下幾大原則：(1)科學性原則科學性是評價指標體系構建最基本的原則，數(shù)字圖書館評價指標體系要在充分調研、試驗、修正的基礎上確定，要能真實、客觀、科學地反映數(shù)字圖書館發(fā)展的狀況。(2)系統(tǒng)性原則數(shù)字圖書館評價指標體系要具有系統(tǒng)性，全面地反映一個數(shù)字圖書館系統(tǒng)的各個方面，并要考慮到數(shù)字圖書館的建設者、使用者、管理者等各種群體的不同視角。(3)可行性原則數(shù)字圖書館評價指標體系要具有可行性，評價指標數(shù)據(jù)應易于獲取且盡可能地易于量化，評價指標不要過于復雜、求全，可操作性的評價指標才具有現(xiàn)實意義。(4)可擴展原則數(shù)字圖書館是在不斷發(fā)展中的，其評價指標體系亦應是在不斷完善中的，在體系最初構建時即應考慮到未來擴展的問題。(5)模塊化原則對數(shù)字圖書館進行整體綜合的評價是一項非常復雜的工作。在實踐應用中，有些評價項目或實踐可能只側重不同的方面，如專門針對數(shù)字資源的評價或專門針對某一類服務的評價，在評價指標體系構建時要充分考慮到不同的應用需求，以模塊化的方式，盡可能使評價指標能夠靈活運用。3評價指標體系框架在對國內外關于數(shù)字圖書館的評價指標進行調研的基礎上，結合我國數(shù)字圖書館建設實踐，尤其是國家數(shù)字圖書館工程的建設，本研究初步建立了一套評價指標體系框架。該框架首先考慮了數(shù)字圖書館的四個核心要素，即館藏、服務、技術、管理。此外，以圖書館等公益性文化機構為建設主體的數(shù)字圖書館快速發(fā)展，這些數(shù)字圖書館系統(tǒng)主要由政府投資，面向社會公眾提供公共服務，對于這些數(shù)字圖書館系統(tǒng)而言，其綜合效益的評價也日顯重要。為此，本課題建立了包括館藏、服務、技術、管理、綜合效益五個維度的數(shù)字圖書館評價指標體系，每個維度由若干一級、二級和三級指標構成該維度的評價指標體系(見表3)。希望能夠以此為基礎，對國家數(shù)字圖書館等數(shù)字圖書館系統(tǒng)進行科學評價，從而促進我國數(shù)字圖書館建設的進一步發(fā)展與完善。3.1館藏評價指標館藏評價指標以數(shù)字圖書館館藏為評價對象，共包括4個一級指標、24個二級指標和若干三級指標。一級指標主要包括數(shù)字館藏數(shù)量、數(shù)字館藏質量、數(shù)字館藏結構、數(shù)字館藏效益。其中數(shù)字館藏數(shù)量包括4個二級指標，即數(shù)字館藏總量、數(shù)字館藏年度增量、數(shù)字資源發(fā)布量和數(shù)字館藏年度發(fā)布增量；數(shù)字館藏質量包括7個二級指標，即學科保障率、核心資源率、資源重復率、資源完整率、館藏時效性、資源規(guī)范性和資源功能性；數(shù)字館藏結構包括8個二級指標，即來源結構、類型結構、發(fā)布結構、載體結構、學科結構、館藏級別結構、語種結構和時間結構；數(shù)字館藏效益包括5個二級指標，即資源保障率、資源利用率、人均擁有數(shù)字館藏數(shù)量、并發(fā)用戶數(shù)和使用成本。3.2服務評價指標服務評價指標以數(shù)字圖書館服務為評價對象，共包括4個一級指標、17個二級指標和若干三級指標。一級指標主要包括服務能力、服務內容、服務成本和服務效果。其中服務能力包括6個二級指標，即服務范圍、可訪問數(shù)字資源、專門從事數(shù)字圖書館服務的人員、軟硬件支持、服務方式、響應速度；服務內容包括3個二級指標，即個性化服務、用戶培訓、服務指南與宣傳；服務成本包括2個二級指標，即圖書館成本支出和用戶成本支出；服務效果包括6個二級指標，即服務公知度、用戶比例、使用頻率、訪問時長、用戶滿意度和用戶再次訪問意愿。3.3技術評價指標技術評價指標以數(shù)字圖書館技術為評價對象，共包括5個一級指標、21個二級指標和若干三級指標。一級指標主要包括基礎環(huán)境、網(wǎng)絡支撐、應用系統(tǒng)、系統(tǒng)安全和綜合性能。其中基礎環(huán)境包括4個二級指標，即終端服務計算機、服務器及服務器集群、存儲和設備機房；網(wǎng)絡支撐包括5個二級指標，即網(wǎng)絡總體設計、綜合布線、網(wǎng)絡設備、網(wǎng)絡系統(tǒng)性能和網(wǎng)絡應用服務；應用系統(tǒng)包括3個二級指標，即數(shù)據(jù)庫管理系統(tǒng)、操作系統(tǒng)和業(yè)務應用系統(tǒng)；系統(tǒng)安全包括6個二級指標，即安全體系、物理安全、網(wǎng)絡系統(tǒng)安全、應用系統(tǒng)安全、應急預案與處理和備份與恢復；綜合性能包括3個二級指標，即系統(tǒng)完整性與穩(wěn)定性、系統(tǒng)健壯性與安全性、技術標準體系。3.4管理評價指標管理評價指標以數(shù)字圖書館管理為評價對象，共包括6個一級指標、47個二級指標和若干三級指標。一級指標主要包括經(jīng)費管理、人員管理、數(shù)字資源管理、用戶服務、設備設施管理和綜合評價。其中經(jīng)費管理包括9個二級指標，即總經(jīng)費預算(年度)、數(shù)字圖書館專項經(jīng)費預算與維護經(jīng)費預算、數(shù)字圖書館不同專項經(jīng)費比率(年度)、數(shù)字資源采購/采集專項經(jīng)費預算(年度)、數(shù)字資源知識產(chǎn)權經(jīng)費預算(年度)、數(shù)字圖書館設備專項經(jīng)費預算(年度)、數(shù)字圖書館服務專項經(jīng)費預算(年度)、數(shù)字圖書館用戶管理專項經(jīng)費預算(年度)、數(shù)字圖書館建設中員工繼續(xù)教育經(jīng)費預算(年度)；人員管理包括6個二級指標，即全館總人員配置(年度)、員工基本情況、從事數(shù)字圖書館業(yè)務人員與技術人員比例(年度)、從事數(shù)字圖書館業(yè)務正式人員與非正式人員比例(年度)、員工績效評定與考核、從事數(shù)字圖書館專業(yè)人員培訓；數(shù)字資源管理包括9個二級指標，即數(shù)字資源建設規(guī)劃制定與實施、數(shù)字資源建設標準應用比例、數(shù)字資源采集與印本文獻采集的重復率、數(shù)字資源內容學科分布比例、數(shù)字資源加工與整合單位內容成本、數(shù)字資源保存單位內容成本、長期保存與使用的數(shù)字資源比率、數(shù)字資源管理規(guī)章制度、在互聯(lián)網(wǎng)發(fā)布數(shù)字資源與館藏擁有比率；用戶服務包括8個二級指標，即用戶使用數(shù)字資源與印本文獻用戶數(shù)比率、用戶使用數(shù)字資源的單位成本、用戶使用數(shù)字資源的用戶覆蓋國家和地區(qū)、用戶使用數(shù)字資源的品種覆蓋率、對用戶培訓的數(shù)量占總用戶的比率(年度)、用戶使用數(shù)字資源的滿意度、數(shù)字圖書館服務規(guī)范、數(shù)字圖書館宣傳推廣效率：設備設施管理包括9個二級指標，即數(shù)字圖書館使用設備設施總量(年度)、館內計算機終端使用率(年度)、網(wǎng)絡與系統(tǒng)正常運行時間(365*24)、網(wǎng)絡與系統(tǒng)中斷次數(shù)與時間(365*24)、硬件系統(tǒng)性能、網(wǎng)絡服務能力、軟件應用系統(tǒng)、系統(tǒng)安全與保障、設備設施管理與維護規(guī)章制度；綜合評價包括6個二級指標，即數(shù)字圖書館建設目標設定、數(shù)字圖書館標準規(guī)范體系建立、數(shù)字圖書館可持續(xù)發(fā)展能力、數(shù)字圖書館可共享服務能力、知識產(chǎn)權保護體系的構建、數(shù)字圖書館資金利用率。3.5綜合效益評價指標綜合效益評價指標以數(shù)字圖書館綜合效益為評價對象，共包括6個一級指標、25個二級指標和若干三級指標。一級指標主要包括物質投入、人力投入、經(jīng)費投入、利用程度、用戶評價和社會效益，其中前三個指標是投入評價指標，后三個指標是產(chǎn)出評價指標。物質投入包括4個二級指標，即年人均新購電子文獻量、年人均電子圖書量、年人均電子期刊量、年購置數(shù)據(jù)庫量；人力投入包括7個二級指標，即專業(yè)技術人員數(shù)量所占比率、管理人員所占比率、后勤人員所占比率、具有本科學歷所占比率、具有研究生以上學歷所占比率、中級職稱所占比率、副高以上職稱所占比率；經(jīng)費投入包括4個二級指標，即年電子文獻資源購置經(jīng)費、年設備購置費、年維修費(網(wǎng)絡資源維護、設備設施維護費等)、其他費用(辦公費、資源共享費及通訊費)；利用程度包括3個二級指標，即人均電子資源點擊下載量、年文獻傳遞量、年虛擬參考咨詢量；用戶評價包括