糧庫智能化升級(jí)改造項(xiàng)目數(shù)據(jù)中心建設(shè)方案_第1頁
糧庫智能化升級(jí)改造項(xiàng)目數(shù)據(jù)中心建設(shè)方案_第2頁
糧庫智能化升級(jí)改造項(xiàng)目數(shù)據(jù)中心建設(shè)方案_第3頁
糧庫智能化升級(jí)改造項(xiàng)目數(shù)據(jù)中心建設(shè)方案_第4頁
糧庫智能化升級(jí)改造項(xiàng)目數(shù)據(jù)中心建設(shè)方案_第5頁
已閱讀5頁,還剩17頁未讀, 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡(jiǎn)介

糧庫智能化升級(jí)改造項(xiàng)目數(shù)據(jù)中心建設(shè)方案數(shù)據(jù)庫建設(shè)是整個(gè)糧食流通管理體系中信息資源層的基礎(chǔ)支撐和中心樞紐。通過數(shù)據(jù)交換技術(shù),將需要共享的基礎(chǔ)數(shù)據(jù)和業(yè)務(wù)專題數(shù)據(jù)統(tǒng)一采集并匯聚,形成數(shù)據(jù)倉庫,同時(shí)再共享給各類用戶使用。在數(shù)據(jù)基礎(chǔ)之上,再建立統(tǒng)一的業(yè)務(wù)應(yīng)用,包括靈活查詢、報(bào)表分析、業(yè)務(wù)協(xié)同、數(shù)據(jù)挖掘等,從而逐步實(shí)現(xiàn)信息共享、工作協(xié)同、決策支持三個(gè)層面的有效利用。數(shù)據(jù)采集目錄數(shù)據(jù)采集主要包括數(shù)據(jù)獲取、數(shù)據(jù)清洗、數(shù)據(jù)轉(zhuǎn)換、數(shù)據(jù)加載等模塊,需要從目前正在使用的各業(yè)務(wù)的數(shù)據(jù)庫中抽取需要整合進(jìn)數(shù)據(jù)倉庫中的數(shù)據(jù),經(jīng)過之后的數(shù)據(jù)處理技術(shù)進(jìn)入數(shù)據(jù)倉庫中。對(duì)于實(shí)時(shí)數(shù)據(jù)采集,還需要使用傳感器網(wǎng)絡(luò),通過把這些傳感器感知到的數(shù)據(jù)經(jīng)過數(shù)據(jù)過濾,數(shù)據(jù)融合等技術(shù),使得這些數(shù)據(jù)進(jìn)入數(shù)據(jù)倉庫。其中數(shù)據(jù)獲取模塊可采用瘦前置端策略或胖前置端策略。倉儲(chǔ)單位信息數(shù)據(jù)企業(yè)基本信息庫點(diǎn)基本信息倉房基本信息廒間基本信息油罐基本信息業(yè)務(wù)管理數(shù)據(jù)計(jì)劃管理客戶管理合同管理出入庫糧食實(shí)時(shí)庫存糧情檢查記錄糧情監(jiān)控倉儲(chǔ)保管數(shù)量監(jiān)測(cè)藥劑管理設(shè)備管理多媒體數(shù)據(jù)庫區(qū)監(jiān)控視頻、倉內(nèi)監(jiān)控視頻、圖片等基礎(chǔ)空間地理信息數(shù)據(jù)基礎(chǔ)空間地理信息數(shù)據(jù)糧食數(shù)據(jù)池建立基于大數(shù)據(jù)技術(shù)的糧食數(shù)據(jù)池引擎。具備處理海量結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的能力。糧食大數(shù)據(jù)池中又按照不同的功能、專業(yè)、調(diào)查類型等分類劃分相應(yīng)的分類數(shù)據(jù)池,將糧食數(shù)據(jù)打碎成最小單元存放在各自對(duì)應(yīng)的數(shù)據(jù)池中,便于管理和共享利用,各分類數(shù)據(jù)池之間由大數(shù)據(jù)池引擎統(tǒng)一管理調(diào)度,形成集中統(tǒng)一的池管理系統(tǒng)。構(gòu)建集中統(tǒng)一的糧食資源庫。以糧食標(biāo)準(zhǔn)數(shù)據(jù)庫、糧食元數(shù)據(jù)庫、糧食制度庫、糧食應(yīng)急數(shù)據(jù)庫等作為支撐。充分發(fā)揮傳統(tǒng)關(guān)系型數(shù)據(jù)庫對(duì)結(jié)構(gòu)化海量數(shù)據(jù)的實(shí)時(shí)存取能力以及大數(shù)據(jù)智能分析能力,集成兩種數(shù)據(jù)管理機(jī)制,打通兩者數(shù)據(jù)流通道,融合統(tǒng)一向用戶提供服務(wù)。信息資源分類糧食核心業(yè)務(wù)可劃分為六類:糧食購、銷、調(diào)、存、加、應(yīng)急等。主要包括(但不限于)以下數(shù)據(jù)資源:(1)業(yè)務(wù)數(shù)據(jù):糧食系統(tǒng)自身各項(xiàng)核心業(yè)務(wù)所產(chǎn)生的數(shù)據(jù),包括儲(chǔ)備糧監(jiān)管(包括視頻數(shù)據(jù)、糧情數(shù)據(jù)、出入庫數(shù)據(jù))、糧食流通信息、糧食倉儲(chǔ)信息糧食質(zhì)量安全監(jiān)管信息、監(jiān)督檢查執(zhí)法信息、糧油產(chǎn)業(yè)信息、安全生產(chǎn)信息、公共服務(wù)信息(含糧油信息、物流信息、服務(wù)信息等)企業(yè)基本信息、電商交易信息、應(yīng)急配送信息等;(2)部門交換:以糧食行業(yè)業(yè)務(wù)協(xié)同需求為導(dǎo)向,積極推進(jìn)跨地區(qū)、跨部門信息共享,明確共享信息內(nèi)容和程序,制定信息共享制度,保障共享信息安全;(3)實(shí)時(shí)焦點(diǎn):通過互聯(lián)網(wǎng)技術(shù)和大數(shù)據(jù)技術(shù),收集到的各種媒體資料,反映社會(huì)公眾對(duì)宏觀經(jīng)濟(jì)關(guān)注焦點(diǎn),便于更好的為黨政部門和社會(huì)公眾服務(wù)。其他業(yè)務(wù)有如下內(nèi)容:(1)行政辦公:全省糧食系統(tǒng)協(xié)同辦公系統(tǒng);(2)宣傳服務(wù):包括對(duì)內(nèi)和對(duì)外宣傳服務(wù);其中對(duì)內(nèi)指:糧食局內(nèi)部的信息、動(dòng)態(tài)、政策、任務(wù)等的發(fā)布和布置,對(duì)外指:用于對(duì)黨委政府以及相關(guān)廳局進(jìn)行數(shù)據(jù)提供服務(wù),交換工作信息、動(dòng)態(tài),各相關(guān)人員可以在許可的權(quán)限下,自行對(duì)數(shù)據(jù)進(jìn)行查詢、分析,產(chǎn)生符合各自需求的數(shù)據(jù)信息;(3)輔助管理:包括人事、財(cái)務(wù)、固定資產(chǎn)以及其他內(nèi)部管理等方面的內(nèi)容;(4)資料文檔:包括分散在糧食專業(yè)人員手中的各種非結(jié)構(gòu)化數(shù)據(jù),如分析、報(bào)告、公報(bào)、新聞圖片、項(xiàng)目照片和錄音、錄像等;根據(jù)上述非共享和共享信息基本數(shù)據(jù)目錄,建立數(shù)據(jù)信息全面完整的糧食數(shù)據(jù)資源目錄。數(shù)據(jù)管理平臺(tái)元數(shù)據(jù)管理元數(shù)據(jù)管理是對(duì)系統(tǒng)對(duì)數(shù)據(jù)的結(jié)構(gòu)管理,主要包括:公用數(shù)據(jù)元的內(nèi)容范圍、分類編碼和數(shù)據(jù)元及其值域代碼標(biāo)準(zhǔn)等。依據(jù)《國(guó)家糧食行業(yè)元數(shù)據(jù)標(biāo)準(zhǔn)》,設(shè)計(jì)并建立元數(shù)據(jù)管理平臺(tái),實(shí)現(xiàn)糧食元數(shù)據(jù)的類別管理、屬性管理和內(nèi)容管理,實(shí)現(xiàn)糧食元數(shù)據(jù)的采集、加工處理、審批、入庫、數(shù)據(jù)發(fā)布的全生命周期管理,通過接口提供標(biāo)準(zhǔn)的元數(shù)據(jù)服務(wù),支撐各類糧食應(yīng)用系統(tǒng)建設(shè)和改造。一、元數(shù)據(jù)管理對(duì)象其中,元數(shù)據(jù)所管理的對(duì)象包括:(1)項(xiàng)目登記:糧食項(xiàng)目的登記表(2)項(xiàng)目?jī)?nèi)容:糧食項(xiàng)目的具體內(nèi)容(3)糧食報(bào)表:組成糧食項(xiàng)目的若干報(bào)表(4)糧食指標(biāo):糧食報(bào)表中的主要組成元素(5)分類:指標(biāo)的分類(6)分組:按制度對(duì)指標(biāo)進(jìn)行分類管理(7)目錄:填報(bào)目錄(8)法規(guī):項(xiàng)目和制度相關(guān)的法規(guī)(9)機(jī)構(gòu):參與糧食元數(shù)據(jù)庫的糧食局相關(guān)機(jī)構(gòu)(10)用戶:各級(jí)用戶應(yīng)實(shí)現(xiàn)對(duì)上述對(duì)象的新建、修改、管理、匯總、查詢、設(shè)計(jì)等操作。提供靈活的基層表、匯總表可視化設(shè)計(jì)、編輯功能,以及審核關(guān)系的設(shè)置。二、基層表設(shè)計(jì)提供對(duì)基層表進(jìn)行描述的設(shè)計(jì)工具,方便用戶對(duì)糧食報(bào)表進(jìn)行定制。提供直觀、便捷的報(bào)表設(shè)計(jì)功能,支持表格與問卷的設(shè)計(jì)。報(bào)表設(shè)計(jì)需采用組件化的設(shè)計(jì)方式,通過在報(bào)表中加入一系列的組件,定義組件的位置和屬性,來完成報(bào)表設(shè)計(jì)工作。組件包括文本、填空、選項(xiàng)、下拉列表、文本區(qū)域、附件、二維表格,并提供從剪貼板復(fù)制公式的功能。在報(bào)表設(shè)計(jì)過程中,需實(shí)現(xiàn)隨時(shí)選擇糧食指標(biāo),糧食分組,填報(bào)目錄,計(jì)量單位,拖入報(bào)表對(duì)應(yīng)位置。元數(shù)據(jù)需按類別、制度選擇,也可輸入關(guān)鍵字查詢選擇。在報(bào)表設(shè)計(jì)工具中要求提供保存、剪切、復(fù)制、粘貼、撤銷、恢復(fù)、刪除、退出等快捷操作功能。三、匯總表設(shè)計(jì)提供匯總表的設(shè)計(jì)工具,方便用戶利用可視化的設(shè)計(jì)方式實(shí)現(xiàn)匯總表的表樣設(shè)計(jì)以及匯總規(guī)則的編寫。在匯總表設(shè)計(jì)工具中要求提供保存、剪切、復(fù)制、粘貼、撤銷、恢復(fù)、刪除、退出等快捷操作功能。匯總規(guī)則編輯,使用自然語言完成審核公式設(shè)計(jì)和匯總公式設(shè)計(jì),需要支持SQL,任意指標(biāo)和分組目錄的引用,可任意設(shè)置匯總級(jí)別以及匯總范圍。四、審核關(guān)系設(shè)置實(shí)現(xiàn)對(duì)所有審核關(guān)系進(jìn)行管理功能,包括添加、刪除、修改審核腳本信息功能,并可設(shè)置審核條件的報(bào)錯(cuò)級(jí)別,包括錯(cuò)誤、警告兩個(gè)級(jí)別。根據(jù)糧食制度預(yù)先制定的審核規(guī)則完成上報(bào)數(shù)據(jù)的審核、驗(yàn)收。信息資源整合糧食流通管理體系的信息化建設(shè)中最關(guān)鍵的一個(gè)問題是,如何將各部門、各企業(yè)、各地域的信息最大限度地集成與利用,提供快速、系統(tǒng)和簡(jiǎn)便的信息服務(wù),實(shí)現(xiàn)信息共享、決策科學(xué)、工作高效、跨越發(fā)展。為了加快推進(jìn)糧食信息化管理體系建設(shè),必須要整合現(xiàn)有各類信息資源,實(shí)現(xiàn)資源優(yōu)化配置、信息系統(tǒng)共建共享,減少重復(fù)建設(shè)。通過對(duì)各類視頻圖像資源、糧食業(yè)務(wù)數(shù)據(jù)、公共信息資源等實(shí)施全面整合,為糧食流通管理業(yè)務(wù)提供信息基礎(chǔ)支撐,為整個(gè)糧食監(jiān)管的各項(xiàng)業(yè)務(wù)提供信息資源支撐,實(shí)現(xiàn)糧食管理的監(jiān)控監(jiān)測(cè)、預(yù)警預(yù)測(cè),以及情報(bào)綜合、態(tài)勢(shì)分析、綜合研判、輔助決策、調(diào)控工作提供支撐;還為政府其他業(yè)務(wù)部門和企業(yè)單位提供可共享的數(shù)據(jù),為后期全面開展智慧糧食和智能監(jiān)管應(yīng)用奠定基礎(chǔ)。信息資源處理總體框架根據(jù)對(duì)總體架構(gòu)的分析,為實(shí)現(xiàn)系統(tǒng)向政府、公眾和企業(yè)提供糧食信息服務(wù)的目的,關(guān)鍵是要加強(qiáng)糧食相關(guān)信息的采集和整合,因此系統(tǒng)建設(shè)的核心是數(shù)據(jù)處理,從數(shù)據(jù)層面看,省糧食管理信息系統(tǒng)由為六大區(qū)域組成。(1)源數(shù)據(jù)區(qū):外部數(shù)據(jù),包括從各種渠道進(jìn)入數(shù)據(jù)中心的數(shù)據(jù)。主要是為省糧食管理信息系統(tǒng)提供各類信息資源,數(shù)據(jù)采集主要包括儲(chǔ)糧單位、糧食企業(yè)、加工網(wǎng)點(diǎn)、糧食供應(yīng)網(wǎng)點(diǎn)等等。(2)數(shù)據(jù)緩沖區(qū):外部數(shù)據(jù)進(jìn)入后,在ETL處理之前的臨時(shí)存儲(chǔ)空間。(3)中心數(shù)據(jù)倉庫區(qū):海量數(shù)據(jù)庫的主要數(shù)據(jù)生成區(qū)域,從細(xì)節(jié)數(shù)據(jù)到集成數(shù)據(jù)層層整合,每一層都可以供信息資源樹使用。(4)接入與分發(fā)區(qū):對(duì)于數(shù)據(jù)量大,或只關(guān)心實(shí)時(shí)數(shù)據(jù)而無需保留歷史的數(shù)據(jù),如視頻資源,傳感器資源等,可通過此渠道進(jìn)行接入、整合及共享分發(fā),當(dāng)需要存儲(chǔ)時(shí)可隨時(shí)進(jìn)入中心數(shù)據(jù)倉庫區(qū)。(5)數(shù)據(jù)服務(wù)區(qū):本區(qū)域重點(diǎn)關(guān)注業(yè)務(wù)應(yīng)用,將中心數(shù)據(jù)倉庫區(qū)中的數(shù)據(jù)進(jìn)行業(yè)務(wù)分類,以視圖、目錄的方式對(duì)外展現(xiàn)。(6)數(shù)據(jù)應(yīng)用區(qū):將數(shù)據(jù)服務(wù)區(qū)域的信息資源形成目錄索引,為各類應(yīng)用及服務(wù)提供接口,通過應(yīng)用系統(tǒng)、省糧食局門戶網(wǎng)站等對(duì)外提供信息服務(wù)。在這些區(qū)域內(nèi),運(yùn)用了多種數(shù)據(jù)倉庫的技術(shù)理論支持,這些理論及技術(shù)的作用區(qū)域如下:源數(shù)據(jù)分析:涉及源數(shù)據(jù)區(qū)和數(shù)據(jù)緩沖區(qū)。數(shù)據(jù)整合:貫穿海量數(shù)據(jù)庫所有層面。存儲(chǔ)與備份:除原始數(shù)據(jù)外,只要進(jìn)入海量數(shù)據(jù)庫系統(tǒng)架構(gòu)內(nèi)部,都涉及到存儲(chǔ)與備份的問題。數(shù)據(jù)采集:涉及到源數(shù)據(jù)區(qū)、數(shù)據(jù)緩沖區(qū)、中心數(shù)據(jù)倉庫區(qū)。資源目錄管理:涉及信息資源樹區(qū)、目錄區(qū)。ETL:涉及源數(shù)據(jù)區(qū)、緩沖區(qū)、中心數(shù)據(jù)倉庫區(qū)、數(shù)據(jù)服務(wù)區(qū)。本功能的重點(diǎn)在于控制數(shù)據(jù)質(zhì)量,保證數(shù)據(jù)業(yè)務(wù)統(tǒng)一,以及保證數(shù)據(jù)的時(shí)效性。元數(shù)據(jù)管理:涉及中心數(shù)據(jù)倉庫區(qū)、數(shù)據(jù)服務(wù)區(qū)、數(shù)據(jù)應(yīng)用區(qū)。數(shù)據(jù)倉庫設(shè)計(jì):涉及中心數(shù)據(jù)倉庫區(qū)。信息資源整合內(nèi)容根據(jù)調(diào)研分析,我們梳理出現(xiàn)有業(yè)務(wù)的數(shù)據(jù)資源,結(jié)合各處室的業(yè)務(wù)應(yīng)用,站在糧食管理角度,經(jīng)過科學(xué)的分析、聚類方法,劃分為業(yè)務(wù)應(yīng)用主題分類,如下表所示:信息資源目錄管理針對(duì)數(shù)據(jù)資源及其標(biāo)準(zhǔn)的管理需求,糧食流通管理系統(tǒng)應(yīng)提供相應(yīng)的系統(tǒng)功能,以便管理者對(duì)數(shù)據(jù)資源進(jìn)行有效的配置和管理,從而使用戶能夠得到方便、快捷的信息服務(wù)。信息資源目錄體系管理架構(gòu)包括信息資源目錄體系使用和管理的三個(gè)角色和六項(xiàng)活動(dòng)。其中,三個(gè)角色是信息資源目錄的提供者、管理者和使用者。六項(xiàng)活動(dòng)包括規(guī)劃、編目、注冊(cè)、發(fā)布、維護(hù)、查詢。提供者負(fù)責(zé)信息資源目錄內(nèi)容的規(guī)劃和編目,管理者負(fù)責(zé)信息資源目錄內(nèi)容的注冊(cè)、發(fā)布以及系統(tǒng)維護(hù),使用者可以查詢信息資源目錄內(nèi)容。數(shù)據(jù)存儲(chǔ)和備份根據(jù)數(shù)據(jù)技術(shù)理念,本體系擬采用分布式數(shù)據(jù)存儲(chǔ)的模式,通過建立一個(gè)信息聚合總中心和若干信息聚合分中心的分布式存儲(chǔ)模式,來滿足各類糧食流通管理數(shù)據(jù)信息服務(wù)的實(shí)際需要。在數(shù)據(jù)庫結(jié)構(gòu)的設(shè)計(jì)上,分析系統(tǒng)整體功能需求及響應(yīng)要求,考慮了現(xiàn)場(chǎng)實(shí)際管理能力,使得系統(tǒng)技術(shù)能力和管理能力相匹配,不以片面追求高性能為目的,要合理設(shè)定系統(tǒng)響應(yīng)時(shí)間、并發(fā)性、存儲(chǔ)能力等關(guān)鍵指標(biāo)。數(shù)據(jù)服務(wù)數(shù)據(jù)服務(wù)封裝數(shù)據(jù)服務(wù)封裝主要是完成數(shù)據(jù)加工處理的過程,包括數(shù)據(jù)格式轉(zhuǎn)換、數(shù)據(jù)清洗、以及數(shù)據(jù)加工等數(shù)據(jù)處理功能。數(shù)據(jù)服務(wù)封裝首先是適配器服務(wù)。適配器服務(wù)是外系統(tǒng)接入數(shù)據(jù)交換系統(tǒng)的橋梁,是多種異構(gòu)系統(tǒng)之間互連互通及互操作的重要組件。適配器遵循JCA1.5標(biāo)準(zhǔn),實(shí)現(xiàn)適配器的重用。服務(wù)封裝是數(shù)據(jù)交換接入的最前端,無論直接交換還是“橋接交”換,都可以采用適配器服務(wù)封裝實(shí)現(xiàn)。XML數(shù)據(jù)表示根據(jù)轉(zhuǎn)換定義的規(guī)則,完成數(shù)據(jù)轉(zhuǎn)換的處理。將原始的數(shù)據(jù)轉(zhuǎn)換為需要的數(shù)據(jù)格式。統(tǒng)一的數(shù)據(jù)和服務(wù)表示——標(biāo)準(zhǔn)XML。不同的系統(tǒng)傳輸數(shù)據(jù)內(nèi)容和方式都可能不一樣,不同的系統(tǒng)提供服務(wù)的方式和數(shù)據(jù)格式也不一樣,為了使不同系統(tǒng)在互相交互時(shí)有一個(gè)統(tǒng)一的接口表現(xiàn)方式,需要定義一套統(tǒng)一的接口(服務(wù)方式和數(shù)據(jù)格式)表示方式,因?yàn)閄ML的強(qiáng)大描述能力,可使用XML來描述各系統(tǒng)的服務(wù)接口和數(shù)據(jù)傳輸方式。適配器服務(wù)不同的業(yè)務(wù)系統(tǒng)存儲(chǔ)數(shù)據(jù)的方式可能各不相同,需要支持?jǐn)?shù)據(jù)源的不同存儲(chǔ)方式(如不同的數(shù)據(jù)庫、文件等)。采用適配器服務(wù)技術(shù)。接入的適配器服務(wù)封裝主要是為了減少開發(fā)工作量,努力實(shí)現(xiàn)接入部門的"零編程"目標(biāo)。適配器服務(wù)是外系統(tǒng)接入數(shù)據(jù)交換系統(tǒng)的橋梁,是多種異構(gòu)系統(tǒng)之間互連互通及互操作的重要組件。數(shù)據(jù)描述數(shù)據(jù)共享的主要功能是數(shù)據(jù)采集和數(shù)據(jù)應(yīng)用,通過數(shù)據(jù)描述工具和數(shù)據(jù)描述方式,作為整個(gè)數(shù)據(jù)共享的基礎(chǔ)。數(shù)據(jù)共享服務(wù)的技術(shù)實(shí)現(xiàn)及其表現(xiàn)形式可以有多種,如提供的Java服務(wù)、常用的Web服務(wù)等。能夠?qū)⒂脩魟?chuàng)建的Java服務(wù)、適配器服務(wù)等,發(fā)布為Web服務(wù)。且數(shù)據(jù)服務(wù)方式通過支持已有應(yīng)用的快速接入及服務(wù)化封裝,實(shí)現(xiàn)服務(wù)的快速開發(fā)向?qū)В员阃ㄟ^服務(wù)總線統(tǒng)一提供已有應(yīng)用服務(wù)或第三方服務(wù)的接入、訪問和管理。要支持Web服務(wù)的常用工業(yè)標(biāo)準(zhǔn)。數(shù)據(jù)自動(dòng)同步數(shù)據(jù)共享服務(wù)存在著大量的數(shù)據(jù)抽取和數(shù)據(jù)同步需求,實(shí)現(xiàn)基本的數(shù)據(jù)自動(dòng)抽取和同步功能,支持?jǐn)?shù)據(jù)同步功能的快速建立。同步方式分為:全表、時(shí)間戳、觸發(fā)器三種方式。數(shù)據(jù)服務(wù)庫及管理使用標(biāo)準(zhǔn)接口的服務(wù)注冊(cè)庫進(jìn)行服務(wù)注冊(cè)和檢索、Web服務(wù)部署后的啟動(dòng)/停止控制及將部署后的服務(wù)列表查詢功能集成進(jìn)了監(jiān)控中心等,可提供完整的Web服務(wù)封裝、開發(fā)、部署、運(yùn)行監(jiān)控、運(yùn)行服務(wù)水平數(shù)據(jù)監(jiān)測(cè)統(tǒng)計(jì)、服務(wù)注冊(cè)和檢索等全生命周期管理,還可通過基于標(biāo)準(zhǔn)規(guī)范的服務(wù)注冊(cè)庫來直接使用。數(shù)據(jù)服務(wù)編排基于Java的編碼調(diào)試開發(fā)環(huán)境,根據(jù)具體業(yè)務(wù),開發(fā)相應(yīng)服務(wù),或者進(jìn)行服務(wù)的合成與編排。Java服務(wù)對(duì)外可以封裝提供業(yè)務(wù)服務(wù),供其他服務(wù)或應(yīng)用消費(fèi);另外它也能夠消費(fèi)其他服務(wù),將不同的業(yè)務(wù)服務(wù)進(jìn)行組裝,形成粒度更大的業(yè)務(wù)服務(wù)。服務(wù)編排:消費(fèi)其他服務(wù)(按一定邏輯順序消費(fèi)即所謂對(duì)這些被消費(fèi)服務(wù)的編排),同時(shí)對(duì)其他消費(fèi)者提供服務(wù)(將多個(gè)服務(wù)編排起來完成更大任務(wù)的功能)將已經(jīng)開發(fā)的業(yè)務(wù)服務(wù)和其所用到的服務(wù)建立連接關(guān)系,進(jìn)行合成組裝,構(gòu)成一個(gè)能夠打包和部署、完成某些業(yè)務(wù)功能的應(yīng)用。數(shù)據(jù)集成機(jī)制根據(jù)業(yè)務(wù)系統(tǒng)需求,建立實(shí)時(shí)、定時(shí)、單向、雙向機(jī)制。(1)實(shí)時(shí)機(jī)制實(shí)時(shí)機(jī)制采用觸發(fā)器機(jī)制,依靠數(shù)據(jù)庫自身的實(shí)時(shí)觸發(fā)管理,確保數(shù)據(jù)交換的實(shí)時(shí)同步,實(shí)時(shí)同步時(shí)間在毫秒級(jí)。觸發(fā)器分為INSERT、UPATE、DELETE三種。即業(yè)務(wù)表在數(shù)據(jù)變化時(shí)根據(jù)三種觸發(fā)條件判斷屬于那種數(shù)據(jù)更新方式并定位數(shù)據(jù)記錄。在數(shù)據(jù)加載時(shí)通過定位信息獲取數(shù)據(jù)并按照觸發(fā)類型進(jìn)行數(shù)據(jù)更新同步。(2)定時(shí)機(jī)制定時(shí)交換機(jī)制采用時(shí)間戳方式,依靠操作系統(tǒng)時(shí)間就需要在業(yè)務(wù)表中統(tǒng)一添加時(shí)間字段作為時(shí)間戳(如表中已有相應(yīng)的時(shí)間字段,可以不必添加),每當(dāng)更新修改業(yè)務(wù)數(shù)據(jù)時(shí),同時(shí)修改時(shí)間戳字段值。當(dāng)數(shù)據(jù)加載時(shí),通過上次運(yùn)行時(shí)間、本次運(yùn)行時(shí)間與時(shí)間戳字段的比較來決定進(jìn)行何種數(shù)據(jù)抽取。(3)單向機(jī)制無論是定時(shí)還是實(shí)時(shí)交換機(jī)制,都可以設(shè)定為單向交換。即針對(duì)一個(gè)數(shù)據(jù)源,只是做同一種操作向其他數(shù)據(jù)源做數(shù)據(jù)同步。(4)雙向機(jī)制對(duì)于實(shí)時(shí)數(shù)據(jù)同步可以支持雙向交換。即針對(duì)一個(gè)數(shù)據(jù)源,在往其他數(shù)據(jù)源做數(shù)據(jù)同步的同時(shí),該數(shù)據(jù)源又要受被其同步的數(shù)據(jù)源的變化做實(shí)時(shí)同步。數(shù)據(jù)加工標(biāo)準(zhǔn)的數(shù)據(jù)處理模塊——過濾,格式轉(zhuǎn)換、合并、拆分。需提供圖形可視化的異構(gòu)數(shù)據(jù)格式轉(zhuǎn)換映射工具,內(nèi)置豐富函數(shù),能夠?qū)⑤斎霐?shù)據(jù)和輸出數(shù)據(jù)進(jìn)行不同格式間的轉(zhuǎn)換(如結(jié)構(gòu)化的XML、非XML或Java對(duì)象數(shù)據(jù)),從而可快速集成異構(gòu)應(yīng)用,無需考慮表示數(shù)據(jù)采用的格式。還可通過基于XSLT服務(wù)、Java服務(wù)、數(shù)據(jù)庫函數(shù)三種圖形可視化數(shù)據(jù)格式進(jìn)行轉(zhuǎn)換。服務(wù)流程合成將已經(jīng)開發(fā)的業(yè)務(wù)服務(wù)和其所用到的服務(wù)建立連接關(guān)系,進(jìn)行合成組裝,構(gòu)成一個(gè)能夠打包和部署、完成某些業(yè)務(wù)功能的應(yīng)用。合成應(yīng)用,是一個(gè)組件、服務(wù)的裝配過程,它創(chuàng)建的成果是能夠打包和部署的業(yè)務(wù)應(yīng)用。通過合成應(yīng)用,能夠發(fā)布為Web服務(wù)。數(shù)據(jù)服務(wù)管理監(jiān)控(1)服務(wù)資源管理建立服務(wù)資源中心,主要功能是集中管理包括服務(wù)、組件、項(xiàng)目及相應(yīng)權(quán)限等各種系統(tǒng)資源,它包括用戶/組管理、資源管理、權(quán)限控制、資源目錄服務(wù)等功能。通過SOA套件提供的客戶端開發(fā)工具,可以對(duì)資源和權(quán)限進(jìn)行存儲(chǔ)、配置及相應(yīng)管理,以支持團(tuán)隊(duì)協(xié)作開發(fā)。(2)服務(wù)流程管理服務(wù)流程管理包括節(jié)點(diǎn)、項(xiàng)目、服務(wù)、組件及業(yè)務(wù)流程等運(yùn)行狀況的集中管理,能夠?qū)λO(jiān)控的對(duì)象進(jìn)行狀態(tài)參看、啟動(dòng)/停止等控制。(3)服務(wù)流程監(jiān)控監(jiān)控管理邏輯節(jié)點(diǎn)及部署在邏輯節(jié)點(diǎn)上面的項(xiàng)目、服務(wù)、組件及業(yè)務(wù)流程等運(yùn)行狀況的集中管理監(jiān)控平臺(tái)。通過監(jiān)控管理中心,用戶可以查看邏輯節(jié)點(diǎn)及部署在邏輯節(jié)點(diǎn)上面的項(xiàng)目、服務(wù)、組件及業(yè)務(wù)流程等運(yùn)行狀態(tài)、日志信息等,并能夠?qū)λO(jiān)控的對(duì)象進(jìn)行如啟動(dòng)/停止等控制。(4)服務(wù)流程日志建立運(yùn)行日志,記錄任何服務(wù)在任何時(shí)刻的運(yùn)行信息,幫助完成系統(tǒng)安全運(yùn)行記錄。數(shù)據(jù)庫建設(shè)方案數(shù)據(jù)庫設(shè)計(jì)原則數(shù)據(jù)庫設(shè)計(jì)將根據(jù)各應(yīng)用系統(tǒng)數(shù)據(jù)的不同分類和特點(diǎn)及功能需求,并結(jié)合數(shù)據(jù)量,提出最適合自身業(yè)務(wù)系統(tǒng)的數(shù)據(jù)架構(gòu)、應(yīng)用架構(gòu)和集成架構(gòu)。數(shù)據(jù)庫設(shè)計(jì)的原則是:(1)以需求為導(dǎo)向,以數(shù)據(jù)為基礎(chǔ)。系統(tǒng)數(shù)據(jù)庫的建設(shè)是以滿足省“糧安工程”糧庫智能化升級(jí)改造項(xiàng)目業(yè)務(wù)處理功能需求為主,即以滿足數(shù)據(jù)的采集、審核、多角度查詢處理為主,同時(shí)兼顧歷史數(shù)據(jù)的清查整理。(2)統(tǒng)一規(guī)劃,分步實(shí)施。系統(tǒng)數(shù)據(jù)庫體系建設(shè)內(nèi)容有輕重緩急之分,各項(xiàng)建設(shè)任務(wù)互相管理、互相影響。如果不經(jīng)詳細(xì)規(guī)劃而輕率進(jìn)行,勢(shì)必因各項(xiàng)資源配備不足而導(dǎo)致混亂甚至返工。因此,必須將各項(xiàng)建設(shè)任務(wù)理出頭緒,找出其中的規(guī)律,按照科學(xué)合理的節(jié)奏分步驟進(jìn)行,才能充分保證數(shù)據(jù)庫建設(shè)的有效性。(3)遵循標(biāo)準(zhǔn),規(guī)范流程。統(tǒng)一規(guī)劃下的分步實(shí)施必須有充分的標(biāo)準(zhǔn)化基礎(chǔ)作保障。否則各單項(xiàng)任務(wù)建設(shè)后的集成工作難以進(jìn)行。對(duì)于流程、數(shù)據(jù)、應(yīng)用技術(shù)的標(biāo)準(zhǔn)化工作,應(yīng)該在系統(tǒng)建設(shè)前進(jìn)行;各應(yīng)用系統(tǒng)除了遵循硬件平臺(tái)、網(wǎng)絡(luò)平臺(tái)的支撐標(biāo)準(zhǔn)外,還應(yīng)嚴(yán)格遵守流程、數(shù)據(jù)、應(yīng)用技術(shù)標(biāo)準(zhǔn),以保證系統(tǒng)間結(jié)合的流暢。(4)迭代法開發(fā)。采用迭代式的方法來開發(fā)和建設(shè)數(shù)據(jù)應(yīng)用體系,即首先選擇最核心的內(nèi)容開發(fā)和部署一個(gè)滿足最基本需求的功能原型。在原型的基礎(chǔ)上根據(jù)反饋信息和業(yè)務(wù)的發(fā)展,不斷總結(jié)經(jīng)驗(yàn),擴(kuò)展數(shù)據(jù)源、不斷豐富原型內(nèi)容完善功能。數(shù)據(jù)庫建設(shè)目標(biāo)數(shù)據(jù)庫建設(shè)要實(shí)現(xiàn)糧食局各職能部門對(duì)業(yè)務(wù)數(shù)據(jù)和糧庫業(yè)務(wù)數(shù)據(jù)的采集、傳輸、處理、存儲(chǔ)、共享以及使用,能夠利用數(shù)據(jù)資源進(jìn)行綜合分析、挖掘,滿足糧食管理業(yè)務(wù)各類基礎(chǔ)信息和業(yè)務(wù)信息的需求。業(yè)務(wù)數(shù)據(jù)庫設(shè)計(jì)(1)數(shù)據(jù)庫建設(shè)與整合的方式采用信息資源規(guī)劃的方法對(duì)現(xiàn)有信息資源進(jìn)行科學(xué)、合理的規(guī)劃,在全面理清現(xiàn)有數(shù)據(jù)資源基礎(chǔ)上,按照標(biāo)準(zhǔn)、規(guī)范開展數(shù)據(jù)整合與建庫。基本流程如下圖所示。圖數(shù)據(jù)庫建設(shè)與整合流程對(duì)于新建信息數(shù)據(jù)庫,按照統(tǒng)一的標(biāo)準(zhǔn)、規(guī)范,同步建立信息數(shù)據(jù)庫,為保證新建基礎(chǔ)數(shù)據(jù)庫的質(zhì)量,數(shù)據(jù)入庫前須進(jìn)行嚴(yán)格的數(shù)據(jù)檢查。對(duì)于新建的業(yè)務(wù)數(shù)據(jù)庫,建立統(tǒng)一的數(shù)據(jù)庫標(biāo)準(zhǔn)、規(guī)范,通過相關(guān)業(yè)務(wù)系統(tǒng)的運(yùn)行,同步建立業(yè)務(wù)數(shù)據(jù)庫。對(duì)于現(xiàn)有數(shù)據(jù)庫的整合,根據(jù)同構(gòu)同標(biāo)準(zhǔn)、同構(gòu)不同標(biāo)準(zhǔn)、異構(gòu)同標(biāo)準(zhǔn)、異構(gòu)不同標(biāo)準(zhǔn)四種情況按照不同的方法分別進(jìn)行整合改造。但必須堅(jiān)持不打破地方數(shù)據(jù)管理和存儲(chǔ)體系,不改變各地基于數(shù)據(jù)庫的應(yīng)用架構(gòu)為原則。(2) 數(shù)據(jù)庫數(shù)據(jù)類型及數(shù)據(jù)庫部署本項(xiàng)目數(shù)據(jù)庫的數(shù)據(jù)類型有數(shù)字、文本和圖像,具體數(shù)據(jù)類型及相關(guān)屬性涉及到每一個(gè)應(yīng)用系統(tǒng)。數(shù)據(jù)庫集中部署在自治區(qū)糧食局?jǐn)?shù)據(jù)中心,糧庫通過統(tǒng)建的應(yīng)用系統(tǒng)上報(bào)數(shù)據(jù)或通過數(shù)據(jù)共享交換系統(tǒng)交換數(shù)據(jù)。數(shù)據(jù)庫管理與更新維護(hù)(1)建立數(shù)據(jù)庫管理系統(tǒng),統(tǒng)一管理和維護(hù)數(shù)據(jù)庫為了便于數(shù)據(jù)庫的統(tǒng)一管理與維護(hù),將數(shù)據(jù)存儲(chǔ)和應(yīng)用開發(fā)分開,面向不同的具體需求,開發(fā)便于數(shù)據(jù)維護(hù)和更新的基礎(chǔ)數(shù)據(jù)庫管理系統(tǒng)。(2)形成有效的數(shù)據(jù)更新機(jī)制數(shù)據(jù)更新依賴于基層日常數(shù)據(jù)采集的基礎(chǔ)數(shù)據(jù)庫,采用自下而上的更新方式,由下級(jí)數(shù)據(jù)管理部門負(fù)責(zé)日常數(shù)據(jù)采集更新,通過增量備份的方式定期逐級(jí)向上更新數(shù)據(jù)庫。涉及到由上級(jí)部門審批的規(guī)劃

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。

最新文檔

評(píng)論

0/150

提交評(píng)論