共享數(shù)據(jù)中心技術白皮書目錄TOC\o"1-5"\h\z\o"CurrentDocument"前言 2\o"CurrentDocument"術語和符號說明 3\o"CurrentDocument"第一章 概述 4\o"CurrentDocument"什么是共享數(shù)據(jù)中心 4\o"CurrentDocument"共享數(shù)據(jù)中心特點 41.2.1交集數(shù)據(jù)中心特點 41.2.2并集數(shù)據(jù)中心特點 5\o"CurrentDocument"第二章 產(chǎn)品技術架構(gòu) 62.1設計理念 62.2系統(tǒng)架構(gòu) 62.3運行環(huán)境 7\o"CurrentDocument"第三章 產(chǎn)品功能體系 9\o"CurrentDocument"3.1享數(shù)據(jù)中心平臺 93.1.1信息標準體系 103.1.2共享數(shù)據(jù)庫 11\o"CurrentDocument"3.1.3數(shù)據(jù)集成 113.1.4數(shù)據(jù)流分析 12\o"CurrentDocument"共享數(shù)據(jù)中心管理工具 13\o"CurrentDocument"3.2.1登錄注銷 13\o"CurrentDocument"3.2.2信息子集管理系統(tǒng) 143.2.3主題庫管理系統(tǒng) 143.2.4主題服務接口管理系統(tǒng) 14\o"CurrentDocument"信息監(jiān)控與授權管理系統(tǒng) 15\o"CurrentDocument"3.3.1監(jiān)控日志 15\o"CurrentDocument"3.3.2權限管理 15\o"CurrentDocument"3?3?3OMS服務 16\o"CurrentDocument"3.3.4其他 16、八、▲前言由于歷史與技術的原因，以往高校業(yè)務系統(tǒng)的建設往往是以部門級的建設為主，各業(yè)務部門根據(jù)自己的需要進行部門級的信息系統(tǒng)建設開發(fā)，而各部門的信息化程度各不相同，所用的開發(fā)環(huán)境和數(shù)據(jù)庫也各不相通，造成了數(shù)據(jù)信息孤島、數(shù)據(jù)信息的冗余和不一致，同時很難在這些信息集上進行整個學校的全面信息查詢和決策分析等數(shù)據(jù)展示、共享與同步更新的艱難局面。具體表現(xiàn)為：1）各部門應用系統(tǒng)發(fā)展不均衡。學院目前的業(yè)務應用系統(tǒng)發(fā)展不平衡，但是各部門卻都有共同的需求，那就是如何通過對各部門的業(yè)務應用與數(shù)據(jù)整合來提高本部門的工作效率，提升業(yè)務水平，避免大量重復、繁瑣、容易出錯的勞動。2）已經(jīng)和正在形成信息孤島。目前各部門的業(yè)務系統(tǒng)以及業(yè)務與數(shù)據(jù)管理都是獨立的，都是各自維護自身需要的數(shù)據(jù)信息，業(yè)務部門之間的交互還是通過傳統(tǒng)的單據(jù)報文傳遞。這樣整個校園中形成很多信息孤島，造成數(shù)據(jù)信息的大量冗余和不一致，同時很難在這些信息集上進行整個學校的全面信息查詢和決策分析。3）數(shù)據(jù)存儲載體不同。由于現(xiàn)有信息系統(tǒng)的不完善，很多信息的存儲都被分布存儲到不同的數(shù)據(jù)存儲載體上，如有些存儲在數(shù)據(jù)庫中，有些存儲在數(shù)據(jù)文件中，還有些是用文本文件進行保存的。4）信息編碼不一致。各個部門各自使用自己的編碼規(guī)范。5）存在“臟”數(shù)據(jù)。校園中存在一個綜合信息查詢的需求。數(shù)據(jù)整合問題在各個高校中或多或少的都存在著，作為高校數(shù)字化校園建設亟需解決的問題之一，如何來解決它，這是大家共同關心的問題。通過在數(shù)字化校園多年的研究與實踐，我們認為可通過建設高校共享數(shù)據(jù)中心平臺來解決以上這些問題。

術語和符號說明術語描述U/C矩陣用來表達過程與數(shù)據(jù)兩者之間的關系。矩陣中的行表示數(shù)據(jù)類，列表示過程，并以字母U(Use)和C(Create)來表示過程對數(shù)據(jù)類的使用和產(chǎn)生。DCIDCI(DataCleanIntegration)是成都康賽自主研發(fā)的企業(yè)級數(shù)據(jù)清洗與整合平臺產(chǎn)品，包括數(shù)據(jù)清洗與整合作業(yè)管理系統(tǒng)(DCI-MS)、數(shù)據(jù)清洗與整合執(zhí)行引擎(DCI-Engine)以及數(shù)據(jù)清洗與整合作業(yè)設計器(DCI-Studio)。第一章概述什么是共享數(shù)據(jù)中心共享數(shù)據(jù)中心平臺即是統(tǒng)一的數(shù)據(jù)資源共享與交換應用服務平臺，是對信息化的各種結(jié)構(gòu)化數(shù)據(jù)進行統(tǒng)一管理的平臺，還是與各類應用系統(tǒng)進行數(shù)據(jù)交換的平臺，是實現(xiàn)數(shù)據(jù)共享，并提供深層次數(shù)據(jù)挖掘、數(shù)據(jù)分析的重要基礎。通過共享數(shù)據(jù)中心平臺系統(tǒng)的建設，以本校數(shù)據(jù)標準為基礎，建立數(shù)據(jù)中心平臺，實現(xiàn)異構(gòu)信息系統(tǒng)之間的數(shù)據(jù)交換和共享。明確業(yè)務系統(tǒng)與數(shù)據(jù)中心平臺的接口規(guī)范；保證數(shù)據(jù)的準確一致，“誰產(chǎn)生、誰維護”；建立可以提供為信息化綜合查詢和決策支持所需的數(shù)據(jù)信息，為將來決策支持系統(tǒng)積累分析數(shù)據(jù)；為后續(xù)開發(fā)各種應用系統(tǒng)提供數(shù)據(jù)服務，保證新系統(tǒng)建設數(shù)據(jù)的鮮活性和一致性，不會產(chǎn)生新的數(shù)據(jù)孤島。系統(tǒng)2舷2系統(tǒng)3系統(tǒng)1系統(tǒng)系統(tǒng)2舷2系統(tǒng)3系統(tǒng)1系統(tǒng)3數(shù)據(jù)系統(tǒng)H系統(tǒng)N系蛭5共享數(shù)據(jù)中心特點1.2.1交集數(shù)據(jù)中心特點（1） 系統(tǒng)間的數(shù)據(jù)交互完全通過數(shù)據(jù)中心來完成。（2） 共享數(shù)據(jù)中心只對各系統(tǒng)間的需要交互的數(shù)據(jù)建模，各系統(tǒng)可沿用原有權限模型。（3） 系統(tǒng)間所交換的數(shù)據(jù)以各個系統(tǒng)核心數(shù)據(jù)交集的形式存在。（4） 應用系統(tǒng)與共享數(shù)據(jù)中心松散耦合。（5） 對舊系統(tǒng)的改造規(guī)模較小。（6） 建設周期短1.2.2并集數(shù)據(jù)中心特點（1） 各系統(tǒng)的核心數(shù)據(jù)全部由共享數(shù)據(jù)中心控制。（2） 共享數(shù)據(jù)中心需要對所有系統(tǒng)核心數(shù)據(jù)進行建模，包括統(tǒng)一人員身份以及權限模型。（3） 系統(tǒng)間所有共享的數(shù)據(jù)以各個系統(tǒng)核心數(shù)據(jù)并集的形式存在。（4） 應用系統(tǒng)與共享數(shù)據(jù)中心耦合度較高。（5） 對舊系統(tǒng)改造規(guī)模大。（6） 建設周期長。第二章產(chǎn)品技術架構(gòu)2.1設計理念2.2系統(tǒng)架構(gòu)觀有系第高校數(shù)據(jù)中心顧層設計高棧甜掘営観低刊圏書管理—*埒載據(jù)文件據(jù)整D合C中觀有系第高校數(shù)據(jù)中心顧層設計高棧甜掘営観低刊圏書管理—*埒載據(jù)文件據(jù)整D合C中I間件*?** HHzLB新系圾1新系統(tǒng)f新乘銃9WebService2.3運行環(huán)境運行環(huán)境最小配置推薦配置?內(nèi)存容量：2G?內(nèi)存容量：4G硬件環(huán)境?CPU：P42.8*1?CPU：P43.0*2?磁盤容量：40G?磁盤容量：80G?操作系統(tǒng)：WindowsServer2003、Linux、Solaris10、HP-UX?JDK：JDK1.5.0_06版本以上軟件環(huán)境?WEB服務器：Tomcat6.0以上?數(shù)據(jù)庫：Oracle9i以上、SQLServer2000以上、MySQL5.0版本以上

網(wǎng)絡環(huán)境內(nèi)網(wǎng)帶寬：1000M公網(wǎng)帶寬：共享1000M,保證獨享10M?固定IP地址：1個靜態(tài)IP?域名：二級域名1個第三章產(chǎn)品功能體系3.1享數(shù)據(jù)中心平臺數(shù)據(jù)中心是學院業(yè)務的重要樞紐，數(shù)據(jù)和資源的有效的交流與合作離不開數(shù)據(jù)中心。數(shù)據(jù)中心不但能提高機構(gòu)的生產(chǎn)力，改善業(yè)務流程，還能加快變革的進程。數(shù)據(jù)中心已經(jīng)成為IT部門優(yōu)化、保護的戰(zhàn)略重點，教育行業(yè)信息中心也成長為參與決策的重要部門。數(shù)據(jù)中心資源的整合和虛擬化正在不斷發(fā)展，這需要高度可擴展的永續(xù)安全數(shù)據(jù)中心網(wǎng)絡基礎。網(wǎng)絡不但能讓用戶安全訪問各種數(shù)據(jù)中心服務，還能根據(jù)需要實現(xiàn)共享數(shù)據(jù)中心組件的部署、互聯(lián)和匯聚，包括各種應用、服務器、設備和存儲。適當規(guī)劃的數(shù)據(jù)中心網(wǎng)絡不僅能保護應用和數(shù)據(jù)完整性，提高應用可用性和性能，還能增強對不斷變化的市場狀況、業(yè)務重要程度和技術先進性的反應能力。建立統(tǒng)一的數(shù)據(jù)中心，解決數(shù)據(jù)無法及時更新，產(chǎn)生大量信息孤島，數(shù)據(jù)重復采集、系統(tǒng)重復建設，無法獲取地理信息資源的問題，將政府機關、事業(yè)單位的應用系統(tǒng)數(shù)據(jù)集中統(tǒng)一起來。學院建立統(tǒng)一共享數(shù)據(jù)中心作為校內(nèi)基本數(shù)據(jù)的唯一共享平臺，集中整理各個業(yè)務部門的基本數(shù)據(jù)，實現(xiàn)統(tǒng)一管理，保證數(shù)據(jù)的權威和準確，為各個業(yè)務應用系統(tǒng)和各類服務系統(tǒng)提供數(shù)據(jù)支持。共享數(shù)據(jù)庫提供以下主要的功能：?數(shù)據(jù)采集負責采集學校各個業(yè)務系統(tǒng)的數(shù)據(jù)，利用通用的數(shù)據(jù)抽取/同步工具將數(shù)據(jù)采集到共享數(shù)據(jù)中心，同時生成數(shù)據(jù)更新報告。數(shù)據(jù)的整理按照學校數(shù)字化校園制定的信息標準對更新的數(shù)據(jù)進行整理，報告數(shù)據(jù)異常保證數(shù)據(jù)的一致性和準確性，保留歷史數(shù)據(jù)。數(shù)據(jù)的共享對數(shù)據(jù)中心的部分或全部資源進行共享和利用。共享數(shù)據(jù)中心實時提供數(shù)據(jù)使用情況報告。數(shù)據(jù)的挖掘分析通過數(shù)據(jù)挖掘工具對共享數(shù)據(jù)和歷史數(shù)據(jù)的分析和評估，形成各種報表或根據(jù)需要展現(xiàn)分析結(jié)果，為決策提供參考。3.1.1信息標準體系構(gòu)建高校共享數(shù)據(jù)中心，首先要關注的是信息的標準化問題。整個高校的數(shù)據(jù)表示需要按照一定的標準編碼，方便校內(nèi)數(shù)據(jù)和行業(yè)之間數(shù)據(jù)流通。目前存在國家標準、行業(yè)標準、市級標準和高校內(nèi)部自己標準。如何根據(jù)這些標準，兼顧各個標準之間的兼容性，和標準的一致性，以及標準的可擴展性，給出具體高校的信息分類編碼規(guī)格說明書成為高校共享數(shù)據(jù)中心建設的前提。目前在建數(shù)字化校園高校的數(shù)據(jù)標準一般分為基礎代碼數(shù)據(jù)標準、學校各信息子集信息標準、部門數(shù)據(jù)信息標準等?；A代碼數(shù)據(jù)標準主要記錄一些基礎代碼表，例如民族、籍貫等，這些通常有國家標準或相關權威部門的標準。學校各信息子集信息標準主要以教育部標準為主部門數(shù)據(jù)信息標準是根據(jù)學校各信息子集標準然后結(jié)合學校的部門業(yè)務所產(chǎn)生的，該部分集中反映了學校各部門的業(yè)務信息標準，是信息標準的核心部分，各學校的差異比也較大。同時，康賽共享數(shù)據(jù)中心的信息子集管理提供除了教育部標準11類以外，還擴充了6類子集。I..信息標準集結(jié)構(gòu) J11r1[ 代碼集1(. 數(shù)據(jù)集綜合管理寢室電費晚歸管理校歷管理校友管理獎助貸發(fā)放\/S高職院校專用科研管理檔案管理教職工管理〕〔「外事管理教學管理辦公管理學校擴充6類丿學生管理資產(chǎn)管理院系編碼-護樓棟編碼班級編碼校區(qū)編碼專業(yè)編碼性別民族經(jīng)濟行業(yè)」〔綜合管理寢室電費晚歸管理校歷管理校友管理獎助貸發(fā)放\/S高職院校專用科研管理檔案管理教職工管理〕〔「外事管理教學管理辦公管理學校擴充6類丿學生管理資產(chǎn)管理院系編碼-護樓棟編碼班級編碼校區(qū)編碼專業(yè)編碼性別民族經(jīng)濟行業(yè)」〔任課狀態(tài)LV教學類型教育部標準子集11大類學校擴充9類行政區(qū)劃單位性質(zhì)國家/行業(yè)標準代碼集149類共享數(shù)據(jù)中心的共享數(shù)據(jù)庫是所有共享數(shù)據(jù)的存放容器，所有應用系統(tǒng)的共享數(shù)據(jù)在這里集成。它從數(shù)據(jù)源集成數(shù)據(jù)并保持更新同步，成為各個應用系統(tǒng)之間的共享數(shù)據(jù)通道。同時，他被用作統(tǒng)計分析服務的數(shù)據(jù)源，為統(tǒng)計分析服務提供從各個應用系統(tǒng)集成過來的共享數(shù)據(jù)。共享數(shù)據(jù)中心庫通過數(shù)據(jù)集成工具從數(shù)據(jù)源的各個應用系統(tǒng)數(shù)據(jù)庫抽取數(shù)據(jù)，并根據(jù)數(shù)據(jù)類型分類存儲數(shù)據(jù)。康賽共享數(shù)據(jù)中心庫支持市面上主流數(shù)據(jù)庫。如：Oracle、IBMDB2、Sybase、MySQL、SQLServer、MSAccess等。3.1.3數(shù)據(jù)集成共享數(shù)據(jù)中心庫的數(shù)據(jù)是從多個數(shù)據(jù)源集成而來，對于數(shù)據(jù)符合數(shù)據(jù)規(guī)范應用系統(tǒng)，這個集成的過程就是數(shù)據(jù)抽取的過程；對于數(shù)據(jù)不符合數(shù)據(jù)規(guī)范的現(xiàn)有應用系統(tǒng)，集成的過程就是實現(xiàn)將不規(guī)范的數(shù)據(jù)源通過整合轉(zhuǎn)化成規(guī)范的數(shù)據(jù)并保證數(shù)據(jù)的準確。數(shù)據(jù)集成的前提條件是對于每一個要接入的應用系統(tǒng)的數(shù)據(jù)源進行評估和調(diào)研。首先需要確定要從應用系統(tǒng)抽取哪些數(shù)據(jù)，提供相應的數(shù)據(jù)字典，并且確定對應于數(shù)據(jù)中心的數(shù)據(jù)表。數(shù)據(jù)源應具有可訪問的數(shù)據(jù)接口，可接 朋朗、跖計華 入的數(shù)據(jù)接口模式包括：1、直接開放數(shù)據(jù)庫只需要只讀的賬戶權限。需要在保證原有系統(tǒng)數(shù)據(jù)安全性和完整性，不影響原有系統(tǒng)。2、中間文件數(shù)據(jù)源如應用系統(tǒng)不能對外開放數(shù)據(jù)庫，則可以導出差異數(shù)據(jù)文件到指定的位置。3、前置機數(shù)據(jù)庫將原有系統(tǒng)數(shù)據(jù)定時備份至指定的前置數(shù)據(jù)庫服務器，特別適用于網(wǎng)絡隔離以及數(shù)據(jù)安全性高的數(shù)據(jù)環(huán)境。3.1.4數(shù)據(jù)流分析學校的應用系統(tǒng)比較多，彼此間的數(shù)據(jù)交換和數(shù)據(jù)共享也是錯綜復雜。繪制了U/C矩陣，通過使用U/C矩陣的方式可以直觀、形象、清晰的表現(xiàn)出一個過程對相關的一些數(shù)據(jù)的使用或者在這個過程中所產(chǎn)生的一些數(shù)據(jù)，從而進一步具體分析學校哪些部門產(chǎn)生哪些數(shù)據(jù)提供給數(shù)據(jù)中心，哪些部門需要從數(shù)據(jù)中心共享哪些數(shù)據(jù)，明確數(shù)據(jù)來源和流向?！癠”表示對數(shù)據(jù)信息的使用，“C”表示數(shù)據(jù)信息的提供或產(chǎn)生。）以教師的數(shù)據(jù)流向為例，U/C矩陣表如下圖：1團委1基本言息CUU□Uuij.iiuuL2教學佰息er匚U排課信息CU*科琳1UU：DHU5位■!CUuPl教工考檢CU7聘用管理Cu8丄資JCUu9CUuuuu10專家管雀CUUu11此會兼蔗Cu12學習進修CLL3團書惜閱Uc14門菸岳統(tǒng)Cu15甫費信息u..Ccc16收費狠賬UiiC'U-L7UcU1.F刁騎信息U.c19黨團信忌[J'.Cc教師U/C矩陣共享數(shù)據(jù)中心管理工具數(shù)據(jù)管理工具完成對共享數(shù)據(jù)中心的數(shù)據(jù)庫結(jié)構(gòu)的管理維護工作，即對共享數(shù)據(jù)中心中的標準表的元數(shù)據(jù)進行統(tǒng)一登記。元數(shù)據(jù)管理包括表的注冊、字段注冊和更新數(shù)據(jù)結(jié)構(gòu)。表的注冊和字段注冊是指對表名和字段進行中文注釋，并對該表和字段進行詳細的描述。共享數(shù)據(jù)中心中的表數(shù)量非常之多而且涉及到學校的每一個方面，表和字段的注冊就是為共享數(shù)據(jù)中心建立檔案，供訪問者查閱。3.2.1登錄注銷3.2.1.1登錄為用戶管理共享數(shù)據(jù)中心提供身份驗證功能。必需擁有權限的用戶才能使用管理工具對共享數(shù)據(jù)中心進行管理，用戶需要通過賬號，密碼來驗證身份。注銷共享數(shù)據(jù)中心是學校所有系統(tǒng)的核心，安全性必需作為重點進行考慮，用戶在操作完成后，需要通過安全退出來達到安全性的目的。3.2.2信息子集管理系統(tǒng)信息子集列表展示了共享數(shù)據(jù)中心庫中存儲的數(shù)據(jù)表，所有表俊符合國家教育部標準，同時可以擴展學校自定義的各種表。3.2.2.1子集管理子集管理對基于數(shù)據(jù)標準的中心庫信息子集進行增、刪、改、查的管理。3.2.3主題庫管理系統(tǒng)主題庫列表，目前包括教師主題，學生主題和學校主題。3.2.3.1教師主題提供教師主題列表的展示，以主題視圖的方式展示在右側(cè)，同時還提供對教師主題的增、刪、改、查。支持表中單個記錄和多個記錄的導出，導出為excel格式，打印功能目前為打印網(wǎng)頁。3.2.3.2學生主題提供學生主題列表的展示，以主題視圖的方式展示在右側(cè)，同時還提供對學生主題的增、刪、改、查。支持表中單個記錄和多個記錄的導出，導出為excel格式，打印功能目前為打印網(wǎng)頁。3.2.3.3學校主題提供學校主題列表的展示，以主題視圖的方式展示在右側(cè)，同時還提供對學校主題的增、刪、改、查。支持表中單個記錄和多個記錄的導出，導出為excel格式，打印功能目前為打印網(wǎng)頁。3.2.4主題服務接口管理系統(tǒng)主題服務接口功能列表，包括服務接口列表和接口授權兩大部分。3.2.4.1服務接口列表提供服務接口的添加、刪除、修改和查詢功能，接口的數(shù)據(jù)包括接口名稱，接口描述，包路徑等數(shù)據(jù)。3.2.4.2接口授權3.2.4.3接口用戶管理提供接口用戶管理的添加、刪除、修改和