公安大數(shù)據(jù)平臺與

資源中心建設方案目錄01平臺總體建設方案02平臺功能建設方案03資源中心建設方案04平臺建設應用效果公安大數(shù)據(jù)平臺與資源中心構建TB級大數(shù)據(jù)采集、存儲、計算、挖掘、分析與應用能力匯聚數(shù)據(jù)資源形成數(shù)據(jù)資產保護數(shù)據(jù)安全挖掘數(shù)據(jù)價值形成業(yè)務洞察建立數(shù)據(jù)服務城市管理者城市運營者城市企業(yè)城市監(jiān)管機構城市居民公安各系統(tǒng)數(shù)據(jù)物聯(lián)網(wǎng)數(shù)據(jù)社會數(shù)據(jù)政府機構相關數(shù)據(jù)互聯(lián)網(wǎng)數(shù)據(jù)…市公安智慧公安數(shù)據(jù)檢索數(shù)據(jù)計算決策依據(jù)洞察&建議數(shù)據(jù)統(tǒng)計、經營分析、風險預警、智能服務、輔助決策&兌現(xiàn)數(shù)據(jù)價值、賦能公安實戰(zhàn)、提升治安水平、推動社會發(fā)展平臺總體價值定位：信息引擎&決策中樞平臺總體建設目標公安大數(shù)據(jù)中心數(shù)據(jù)應用自助化數(shù)據(jù)運行可視化數(shù)據(jù)組織知識化數(shù)據(jù)監(jiān)控智能化數(shù)據(jù)處理自動化數(shù)據(jù)接入標準化建設目標聚：推進公安、交通、應急、社保相關數(shù)據(jù)資源的整合，促進政務數(shù)據(jù)的對接利用。并逐步推進社會數(shù)據(jù)、互聯(lián)網(wǎng)數(shù)據(jù)等數(shù)據(jù)的采集與匯聚。管：構建一站式數(shù)據(jù)資產可視化管理，通過對數(shù)據(jù)資產的血緣譜系和信息資源目錄的統(tǒng)一管理，實現(xiàn)公安數(shù)據(jù)的全過程治理與管理，以及各環(huán)節(jié)的安全與質量監(jiān)管。通：實現(xiàn)基于應用場景的數(shù)據(jù)資源共享與管理機制，推動公安大數(shù)據(jù)資源的充分共享，讓數(shù)據(jù)為解決交通擁堵、環(huán)境保護等各類社會問題賦能，發(fā)揮公安大數(shù)據(jù)資源的價值。用：整合數(shù)據(jù)資源并開展數(shù)據(jù)應用模型及算法研究，探索數(shù)據(jù)應用于服務模式創(chuàng)新。通過主題庫、智能應用等方式推動在公共安某省市治理、社會管理等領域的廣泛深度應用。安：打造整體安全管控體系，保證平臺上各類數(shù)據(jù)在數(shù)據(jù)匯聚、數(shù)據(jù)管理與治理、數(shù)據(jù)加工處理、數(shù)據(jù)應用開發(fā)、數(shù)據(jù)共享與開放等全生命周期中的安全防護能力。平臺總體建設方案X公安大數(shù)據(jù)平臺與資源中心大數(shù)據(jù)云計算數(shù)據(jù)整合功能設計應用發(fā)布需求分析應用展示模型設計流口管理一人一檔全息感知公共安全數(shù)據(jù)采集數(shù)據(jù)存儲數(shù)據(jù)計算數(shù)據(jù)模型治理管理計算模型數(shù)據(jù)源關聯(lián)業(yè)務目標業(yè)務邏輯計算任務調度數(shù)據(jù)安全數(shù)據(jù)應用服務數(shù)據(jù)服務/能力共享公安社會資源…交警輿情整合系統(tǒng)數(shù)據(jù)數(shù)據(jù)開放攝像其他…Mac整合設備數(shù)據(jù)監(jiān)管人員應用廠家運營人員管理人員服務各方角色找方案&找標準找方案微信（掃第一個碼）每日分享各個領域高質量專業(yè)的解決方案，內容包括某省市、鄉(xiāng)村振興、智慧城管、智慧園區(qū)、智慧公安、智慧水務（水利）、智慧林草、社會綜合治理、智慧旅游、智慧工地、智慧環(huán)衛(wèi)、智慧醫(yī)院、智慧環(huán)保、智慧安監(jiān)等領域，結合數(shù)字孿生、人工智能、物聯(lián)網(wǎng)、大數(shù)據(jù)、云計算等技術，分享行業(yè)售前方案、設計方案、技術方案和項目信息等。找標準微信（掃第二個碼）每日分享各個智慧領域國家和地方標準規(guī)范，國家和地方政策指導文件，讓各個智慧方案有據(jù)可依，內容包括找方案中的各個行業(yè)的政策和規(guī)范，內容在不斷的收集和完善中。找方案知識星球（掃第三個碼）會員可下載所有資料，并每日上新（注：所有資料均通過互聯(lián)網(wǎng)等公開渠道獲取，個人學習使用，請勿用于商業(yè)用途）。找標準知識星球（掃第四個碼）會員可下載所有資料，并每日上新（注：所有資料均通過互聯(lián)網(wǎng)等公開渠道獲取，個人學習使用，請勿用于商業(yè)用途）。找方案星球優(yōu)惠券（掃第五個碼）掃描69元價格優(yōu)惠加入，1W+方案任意下載，資源不斷的豐富完善中......找方案微信找方標準信平臺總體技術架構PAAS存儲與計算分析引擎統(tǒng)計分析數(shù)據(jù)挖掘搜索引擎機器學習DAASSAAS云管理平臺數(shù)據(jù)治理元數(shù)據(jù)管理數(shù)據(jù)質量調度工具運維管理運維自動化告警監(jiān)控開發(fā)管理版本管理開發(fā)工具Hadoop流處理平臺搜索引擎HbasemysqlTomcat……讀寫分離云數(shù)據(jù)庫云資源虛化對象存儲離線采集

（ETL）實時采集

(Flume）互聯(lián)網(wǎng)采集

(Crawler)第三方數(shù)據(jù)采集數(shù)據(jù)交換平臺數(shù)據(jù)總線指揮作戰(zhàn)應急聯(lián)動專題研判軌跡刻畫流動人口管理警情分析車臉識別可視化大屏……指揮作戰(zhàn)應急聯(lián)動專題研判軌跡刻畫流動人口管理警情分析融合數(shù)據(jù)模型標簽管理行業(yè)知識庫流動人口輿情信息重點人員常住人口醫(yī)療工商…數(shù)據(jù)開放服務(OpenDataBus)基礎數(shù)據(jù)模型AI服務車輛識別服務人臉識別服務……市公安大數(shù)據(jù)物聯(lián)數(shù)據(jù)社會數(shù)據(jù)某著名企業(yè)信令數(shù)據(jù)平臺總體應用流程Cloud

DBRDBMSFilesAPP各類智能設備KafkaFilebeat分布式數(shù)據(jù)庫Sqoop采集ETLWorkflow整合內存存儲HDFSElasticSearchNoSQLNewSQL存儲批處理流處理交互式分析模型計算計算深度學習機器學習預測分析圖分析分析報表工具運維可視化數(shù)據(jù)智能圖可視化開發(fā)數(shù)據(jù)存儲處理與應用開發(fā)數(shù)據(jù)源業(yè)務場景數(shù)據(jù)采集數(shù)據(jù)治理數(shù)據(jù)開發(fā)調度數(shù)據(jù)應用抽取配置數(shù)據(jù)摸底數(shù)據(jù)校核模型設計元數(shù)據(jù)配置標簽維護分布式文件系統(tǒng)搭建組件適配構建抽取平臺產線服務部署產線適配產線功能拓展開發(fā)數(shù)據(jù)需求數(shù)據(jù)建模數(shù)據(jù)開發(fā)數(shù)據(jù)調度數(shù)據(jù)維護規(guī)范制定平臺功能建設數(shù)據(jù)對接實施數(shù)據(jù)治理運營平臺總體實施方案資源中心建設目錄01平臺總體建設方案02平臺功能建設方案03資源中心建設方案04平臺建設應用效果平臺功能設計公安大數(shù)據(jù)中心是一個系統(tǒng)工程，如果把大數(shù)據(jù)匯聚中心比如成建一棟大樓，平臺功能建設相當于打地基，把房子的框架搭好，框架穩(wěn)不穩(wěn)，好不好，決定了大樓的基本質量。大數(shù)據(jù)平臺由9大模塊組成，支持至少10000個數(shù)據(jù)任務并發(fā)執(zhí)行，系統(tǒng)響應時間均值<=1s，日處理數(shù)據(jù)量峰值10T（相當于50億條數(shù)據(jù)）數(shù)據(jù)服務數(shù)據(jù)安全數(shù)據(jù)運維數(shù)據(jù)應用數(shù)據(jù)采集平臺數(shù)據(jù)中心層數(shù)據(jù)開發(fā)調度平臺數(shù)據(jù)管理數(shù)據(jù)分析大數(shù)據(jù)中心組成部分平臺功能架構某省市公安大數(shù)據(jù)中心的建設目標某省市公安公安數(shù)據(jù)與業(yè)務特點，采用了當前最主流的大數(shù)據(jù)平臺技術架構，某省市公安大數(shù)據(jù)中心平臺。大數(shù)據(jù)基礎平臺（數(shù)據(jù)存儲、計算與采集）數(shù)據(jù)管理治理(數(shù)據(jù)資產管理、數(shù)據(jù)質量管理、統(tǒng)一開發(fā)調度)數(shù)據(jù)安全管理數(shù)據(jù)可視化統(tǒng)一數(shù)據(jù)門戶基礎支撐平臺流數(shù)據(jù)接入批數(shù)據(jù)接入源數(shù)據(jù)公安數(shù)據(jù)物聯(lián)設備數(shù)據(jù)實時數(shù)據(jù)流外部數(shù)據(jù)互聯(lián)網(wǎng)數(shù)據(jù)…非結構化數(shù)據(jù)支持結構化數(shù)據(jù)、非結構化數(shù)據(jù)、實時流數(shù)據(jù)、設備數(shù)據(jù)等數(shù)據(jù)的采集處理與存儲；批數(shù)據(jù)處理通過數(shù)據(jù)采集任務調度的方式，根據(jù)時間戳定時探查數(shù)據(jù)源數(shù)據(jù)以及結構化文件的變動，通過數(shù)據(jù)采集平臺的解析，抽取增量數(shù)據(jù)到數(shù)據(jù)資源平臺；流數(shù)據(jù)處理通過數(shù)據(jù)資源平臺內獨立部署kafka消息系統(tǒng)，采用數(shù)據(jù)源推送或自動拉取的方式，將流數(shù)據(jù)接入數(shù)據(jù)資源平臺。主動采集&數(shù)據(jù)推送通過對數(shù)據(jù)資產的治理，讓系統(tǒng)數(shù)據(jù)更加準確、一致、完整、安全，降低IT成本；針對數(shù)據(jù)資產應用使得系統(tǒng)數(shù)據(jù)的使用過程更為人性、便捷、智能，從而提升管理決策水平。關于數(shù)據(jù)資產運營是支持系統(tǒng)數(shù)據(jù)資產的分發(fā)、開發(fā)、交據(jù)嫁接的實現(xiàn)。從而促進數(shù)據(jù)資產的價值實現(xiàn)。數(shù)據(jù)資產資產管理主要是針對數(shù)據(jù)資產類目編制的過程梳理、明確職責等內容，同時也可以對數(shù)據(jù)表的元數(shù)據(jù)信息進行有效管理資產總覽從數(shù)據(jù)規(guī)模、類目分布、熱門訪問等多個角度，對數(shù)據(jù)資源平臺上的數(shù)據(jù)資產狀況進行全景式展現(xiàn)。資產目錄對平臺元數(shù)據(jù)的有序組織，是記錄數(shù)據(jù)體系的保障數(shù)據(jù)類目是目錄信息與服務、保障與支撐所組成的一個整體針對資產的合理組織，需要對資產進行對應分類資產報告針對整體平臺上的對應數(shù)據(jù)，提供定周期了解其對應資產情況，對總體資產情況進行分析。資產地圖通過元數(shù)據(jù)信息收集、數(shù)據(jù)血緣探查、數(shù)據(jù)權限申請授權等手段，幫助數(shù)據(jù)資源平臺完成數(shù)據(jù)信息的收集和管理，解決數(shù)據(jù)資源平臺數(shù)據(jù)開發(fā)者有哪些數(shù)據(jù)可用、到哪里可以找到數(shù)據(jù)的難題，并且提升數(shù)據(jù)資源的利用率。實時數(shù)據(jù)管理提供針對實時數(shù)據(jù)的元數(shù)據(jù)管理功能，包括：元數(shù)據(jù)采集、元數(shù)據(jù)存儲、元數(shù)據(jù)運維、數(shù)據(jù)質量檢查、元數(shù)據(jù)分析、權限管理、數(shù)據(jù)生命周期管理、元數(shù)據(jù)服務。數(shù)據(jù)資產管理數(shù)據(jù)質量管理主要包含對數(shù)據(jù)完整性、準確性、鮮活性、權威性的分析和管理，并對數(shù)據(jù)進行跟蹤、處理和解決，實現(xiàn)對數(shù)據(jù)質量的全程管理，提高數(shù)據(jù)的質量。質量模型一套規(guī)則質檢方案一質檢方案二質檢方案……and╋╋質量模型實體表數(shù)據(jù)質量基礎單元完整性準確性鮮活性權威性根據(jù)業(yè)務需要選擇實體表和規(guī)則，方案與方案之間相互獨立，互不干擾。通過執(zhí)行模型下的質檢方案，可以得到用戶關心的數(shù)據(jù)質量分析結果，如問題數(shù)據(jù)明細信息、數(shù)據(jù)質量分析結果等。平臺能夠提供質量規(guī)則配置、質量監(jiān)控、問題處理等功能，及時發(fā)現(xiàn)并分析數(shù)據(jù)質量問題，不斷改善數(shù)據(jù)的使用質量，從而提升數(shù)據(jù)的可用性，挖掘數(shù)據(jù)更大的價值空值檢查值域檢查規(guī)范檢查邏輯檢查重復數(shù)據(jù)檢查及時性檢查缺失記錄檢查引用完整性檢查……檢查質量規(guī)則數(shù)據(jù)質量管理找方案&找標準找方案微信（掃第一個碼）每日分享各個領域高質量專業(yè)的解決方案，內容包括某省市、鄉(xiāng)村振興、智慧城管、智慧園區(qū)、智慧公安、智慧水務（水利）、智慧林草、社會綜合治理、智慧旅游、智慧工地、智慧環(huán)衛(wèi)、智慧醫(yī)院、智慧環(huán)保、智慧安監(jiān)等領域，結合數(shù)字孿生、人工智能、物聯(lián)網(wǎng)、大數(shù)據(jù)、云計算等技術，分享行業(yè)售前方案、設計方案、技術方案和項目信息等。找標準微信（掃第二個碼）每日分享各個智慧領域國家和地方標準規(guī)范，國家和地方政策指導文件，讓各個智慧方案有據(jù)可依，內容包括找方案中的各個行業(yè)的政策和規(guī)范，內容在不斷的收集和完善中。找方案知識星球（掃第三個碼）會員可下載所有資料，并每日上新（注：所有資料均通過互聯(lián)網(wǎng)等公開渠道獲取，個人學習使用，請勿用于商業(yè)用途）。找標準知識星球（掃第四個碼）會員可下載所有資料，并每日上新（注：所有資料均通過互聯(lián)網(wǎng)等公開渠道獲取，個人學習使用，請勿用于商業(yè)用途）。找方案星球優(yōu)惠券（掃第五個碼）掃描69元價格優(yōu)惠加入，1W+方案任意下載，資源不斷的豐富完善中......找方案微信找方標準信數(shù)據(jù)開發(fā)平臺數(shù)據(jù)開發(fā)完成多種環(huán)境的全量與增量數(shù)據(jù)處理能力，簡化開發(fā)過程。統(tǒng)一數(shù)據(jù)開發(fā)入口，支持可視化開發(fā)和原生態(tài)開發(fā)兩種開發(fā)模式，實現(xiàn)原生態(tài)開發(fā)與可視化編排的互相轉換，提升開發(fā)效率，支撐多種混搭數(shù)據(jù)庫環(huán)境的開發(fā)調度功能?！芽梢暬_發(fā)⊙原生態(tài)開發(fā)統(tǒng)一調度平臺以一個流水線生產為例：傳統(tǒng)做法是單條生產線依賴產品的生產工序進行協(xié)同生產。在統(tǒng)一開發(fā)調度平臺可以通過控制中心進行作業(yè)命令下發(fā)，狀態(tài)收集進行控制，達到多個工廠，多條生產線的協(xié)同調度，實現(xiàn)數(shù)據(jù)從“采集→加工→對外應用服務”的全生命周期管理統(tǒng)一調度管理流程設計與管理調度策略管控任務調度控制標準化控件……作業(yè)/任務管理作業(yè)/任務調度作業(yè)/任務執(zhí)行采集轉換加載調度監(jiān)控數(shù)據(jù)安全管理安全服務體系平臺基礎設備信息源身份認證信息數(shù)據(jù)授權信息安全服務信息數(shù)據(jù)使用信息市公安大數(shù)據(jù)平臺數(shù)據(jù)流數(shù)據(jù)流安全運營中心安全服務信息平臺安全運營安全規(guī)范審計事前：統(tǒng)一身份訪問控制事中：數(shù)據(jù)脫敏數(shù)據(jù)分類分級事后：安全日志審計分析風險告警監(jiān)控整體：數(shù)據(jù)安全合規(guī)審查數(shù)據(jù)可視化可視化分析工具提供以簡單拖拽操作方式，靈活、快速的生成各種報表，用戶可對有權限的數(shù)據(jù)資源進行快速的數(shù)據(jù)探索及數(shù)據(jù)可視化分析。專題數(shù)據(jù)，主題數(shù)據(jù)加工完成后，用戶可利用可視化工具開發(fā)可視化報表，經過測試發(fā)布上線后，對外提供可視化服務拖拽編輯可視化圖表豐富的圖表組件，有多種樣式主題可選基于角色、用戶的權限管理，以及空間的數(shù)據(jù)隔離圖表數(shù)據(jù)支持導出csv，以便離線分析。統(tǒng)一數(shù)據(jù)門戶構建統(tǒng)一的數(shù)據(jù)門戶集成數(shù)據(jù)采集、治理管理、數(shù)據(jù)開發(fā)與數(shù)據(jù)應用分析能力，全面打造面向各各角色的一體化數(shù)據(jù)管理與應用門戶，對外提供統(tǒng)一的數(shù)據(jù)管理、集成和應用服務，實現(xiàn)對數(shù)據(jù)資產與服務的協(xié)同管理和應用。通過大，中，小屏實現(xiàn)數(shù)據(jù)目錄、數(shù)據(jù)應用、數(shù)據(jù)地圖、個人管理等各項門戶目錄的建設；它提供應用集成功能，通過多種方式整合決策分析應用系統(tǒng)開發(fā)的應用功能；可根據(jù)角色提供數(shù)據(jù)管理者、數(shù)據(jù)開發(fā)者與數(shù)據(jù)應用者門戶；門戶集成的各個系統(tǒng)界面風格上實現(xiàn)統(tǒng)一，包括列表樣式、頁面布局頁面顏色搭配、字體大小、按鈕風格等。平臺技術特性先進的混合計算架構采用離線計算引擎、流式計算引擎和分布式數(shù)據(jù)庫引擎融合技術架構半結構化、非結構化數(shù)據(jù)提供低成本存儲，并提供低時延、高并發(fā)查詢和分析功能；結構化數(shù)據(jù)采用分布式數(shù)據(jù)庫引擎，支持列式存儲、分布式計算、智能索引等功能，實現(xiàn)高性能結構化數(shù)據(jù)分析處理；計算能力強，數(shù)據(jù)分析輔助決策，擴展能力強。高性價比的分布式集群基于x86服務器本地的計算與存儲資源，計算集群可以動態(tài)調整，從數(shù)臺到數(shù)千臺之間彈性擴展，按需構建應用，減少總體成本；同時，在設計時充分考慮了硬件設備的不可靠因素，在軟件層面提供計算和存儲的高可靠保證；分布式集群，若干節(jié)點服務器出問題，數(shù)據(jù)庫仍可正常使用。云化ETL結構化數(shù)據(jù)和非結構化數(shù)據(jù)統(tǒng)一匯聚接入，“不挑食”；將不同業(yè)務系統(tǒng)中分散、零亂、標準不統(tǒng)一的各種源數(shù)據(jù)中的數(shù)據(jù)進行匯聚；支持從DBMS、互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、政企單位等各種數(shù)據(jù)源中提取數(shù)據(jù)。數(shù)據(jù)分層和分級存儲不同數(shù)據(jù)分開存儲，互不影響，防止數(shù)據(jù)相互滲透，保證數(shù)據(jù)安全；把數(shù)據(jù)按照不同階段分為ODS、DWD、DW和ADS數(shù)據(jù)，分別存儲在大數(shù)據(jù)平臺和數(shù)據(jù)倉庫，滿足不同階段的計算需求。公安大數(shù)據(jù)平臺技術特點平臺應用特性數(shù)據(jù)接入標準化通過制定接口規(guī)范，支持多源頭采集、多種形態(tài)的數(shù)據(jù)形式，同時數(shù)據(jù)對賬清晰明了，同時通過設置預警閾值，對源頭的數(shù)據(jù)監(jiān)控，及時發(fā)現(xiàn)源頭采集問題。數(shù)據(jù)處理自動化通過自動化對標、自動化作業(yè)等產品、工具，以機器算法代替人力勞動，大大提高生產力。數(shù)據(jù)監(jiān)控智能化通過定義多種監(jiān)控點及接口規(guī)范，實現(xiàn)運維監(jiān)控的統(tǒng)一管理，結合多種提醒方式，及時發(fā)現(xiàn)并解決問題。數(shù)據(jù)組織知識化通過分析各系統(tǒng)共享數(shù)據(jù)集，提煉權威數(shù)據(jù)，形成主數(shù)據(jù)模型。通過人、車、地址等主題域建模，掌握各主題的內在關系，深度整合，形成以實體為單位的復雜的關系網(wǎng)絡。數(shù)據(jù)運行可視化ETL工具與數(shù)據(jù)治理平臺有機結合，將數(shù)據(jù)治理實施流程各環(huán)節(jié)通過平臺去實現(xiàn)，由平臺驅動各產品協(xié)作完成整個數(shù)據(jù)治理過程。數(shù)據(jù)應用自助化依托服務總線，建設統(tǒng)一的服務平臺，服務大廳，通過服務權限和數(shù)據(jù)權限控制，用戶可自助申請、自助使用、自助評價反饋。目錄01平臺總體建設方案02平臺功能建設方案03資源中心建設方案04平臺建設應用效果資源中心總體規(guī)劃共享數(shù)據(jù)對內共享區(qū)大數(shù)據(jù)資源區(qū)離線數(shù)據(jù)區(qū)實時數(shù)據(jù)平臺中心庫專題庫融合庫基礎庫主題庫結構化數(shù)據(jù)公共數(shù)據(jù)庫層非結構化數(shù)據(jù)重點人員庫流動人口庫警種庫輿情信息庫人口主題庫案件主題庫車輛主題庫位置主題庫貼源數(shù)據(jù)層公安資源社會資源智能物聯(lián)設備基礎標簽庫數(shù)據(jù)資源中心建設相當于裝飾整棟大樓，讓大樓更加實用，滿足入住人的個性化需求，為各類應用建設提供基礎數(shù)據(jù)環(huán)境和云計算支撐。數(shù)據(jù)采集范圍數(shù)據(jù)科目對接系統(tǒng)對接數(shù)據(jù)內容數(shù)據(jù)類型當前數(shù)據(jù)量日增數(shù)據(jù)量對接方式數(shù)據(jù)返回方式公安業(yè)

務數(shù)據(jù)公安大數(shù)據(jù)平臺

1.公安資源數(shù)據(jù)(法制、交警、科通、網(wǎng)警、刑偵、治安……)

2.社會資源數(shù)據(jù)(安監(jiān)、保監(jiān)、某著名企業(yè)、某著名企業(yè)、公交、交通、民政電力、司法、旅安、票證……)1.數(shù)據(jù)庫結構化數(shù)據(jù)

2.圖片以二進制方式存儲在數(shù)據(jù)庫207類數(shù)據(jù)

10億條100萬條Http-Api/數(shù)據(jù)庫視圖1.結構化返回XML，解析后提取數(shù)據(jù)

2.圖片數(shù)據(jù)返回Base64碼流數(shù)據(jù)，解析后提取圖片社會輿

情數(shù)據(jù)輿情數(shù)據(jù)服務社會熱點、居民動態(tài)、群體情緒分析、安全隱患風險……1.數(shù)據(jù)庫結構化數(shù)據(jù)

2.有少量圖片、視頻//數(shù)據(jù)接口/中間庫/文件按接口方式返回數(shù)據(jù)市公安本地社會資源數(shù)據(jù)1、ETC數(shù)據(jù)

2、衛(wèi)健委、文旅局/////物聯(lián)設備視頻數(shù)據(jù)視頻平臺1、雪亮工程監(jiān)控視頻

2、車臉圖片

3、村級和治安監(jiān)控1、結構化數(shù)據(jù)庫（監(jiān)控點位、設備信息）

2、車臉圖片數(shù)據(jù)TB級別1、現(xiàn)有11000多路視頻，分布式存儲(200TB)

2、車臉數(shù)據(jù)每天200-300萬1、點位信息可通過數(shù)據(jù)庫視圖方式直接獲取

2、視頻流和視頻文件需要走接口方式獲?。ㄒ垣@取人臉、車輛或特點事件視頻數(shù)據(jù)為主，數(shù)據(jù)先由AI平臺處理）

3、車臉圖片數(shù)據(jù)公安1400協(xié)議下接口方式獲取MAC數(shù)據(jù)1.終端特征信息2.被采集熱點信息結構化數(shù)據(jù)庫TB級別20GFTP服務器接收zip壓縮包，含xml索引文件和bcp數(shù)據(jù)文件人臉數(shù)據(jù)平臺1000路抓拍人臉照片數(shù)據(jù)實時人臉圖片，對應的抓拍設備編號、抓拍時間點，包含人臉的小圖和人臉所在大圖的URLTB級別50-100萬照片公安1400協(xié)議下接口方式獲取按接口方式返回數(shù)據(jù)小區(qū)數(shù)據(jù)電子巡更、車輛出入、人員出入、入侵報警、身份驗證、門禁等…1.結構化數(shù)據(jù)庫

2.車輛出入圖片等非結構化數(shù)據(jù)TB級別/小區(qū)管理平臺通過網(wǎng)閘接入公安視頻專網(wǎng)智安小區(qū)匯聚與管理平臺數(shù)據(jù)匯聚流程數(shù)據(jù)流向圖數(shù)據(jù)標簽建設構建基礎庫數(shù)據(jù)標簽模板數(shù)據(jù)標簽管理分類查詢功能分類統(tǒng)計提供數(shù)據(jù)標簽模版管理功能，可對數(shù)據(jù)標簽模板進行編輯修改。提供數(shù)據(jù)標簽管理功能，滿足數(shù)據(jù)資產業(yè)務屬性隨業(yè)務發(fā)生變化時數(shù)據(jù)資產標簽能夠靈活變化。提供數(shù)據(jù)資產分類查詢功能，可通過選取分類標簽中具體的屬性標簽對數(shù)據(jù)資產進行篩查。提供數(shù)據(jù)資產分類統(tǒng)計功能，可對各種標簽屬性的數(shù)據(jù)資產進行分類統(tǒng)計，并形成統(tǒng)計報表，供使用人員查詢不同屬性數(shù)據(jù)資產的整體統(tǒng)計情況。數(shù)據(jù)標簽體系數(shù)據(jù)治理涵蓋了數(shù)據(jù)的全局治理和過程管控，是數(shù)據(jù)可用的前提，只有確保數(shù)據(jù)的標準化、規(guī)范化，可信可用，才能進一步通過數(shù)據(jù)運營與應用實現(xiàn)數(shù)據(jù)資產管理，發(fā)現(xiàn)數(shù)據(jù)問題、發(fā)掘數(shù)據(jù)價值，進而實現(xiàn)數(shù)據(jù)資產的盤活和有效利用。數(shù)據(jù)管理平臺基于元模型驅動模式，構建一體化的數(shù)據(jù)資產管控，實現(xiàn)全流程、全生命周期和全景式的“三全”治理，確保每一份數(shù)據(jù)資產皆可靠、可信、可用；通過對數(shù)據(jù)、應用、系統(tǒng)綜合管理，構建標準化、流程化、自動化、一體化的數(shù)據(jù)管理體系。數(shù)據(jù)匯聚，融合管理從市公安大數(shù)據(jù)、各類物聯(lián)數(shù)據(jù)預源采集數(shù)據(jù)形成大數(shù)據(jù)平臺基礎，并對匯集的原始數(shù)據(jù)開展基于數(shù)據(jù)管理視角和業(yè)務應用視角的治理及應用工作。提煉抽象信息，形成知識基于業(yè)務需求引導和對數(shù)據(jù)資源信息的價值梳理,對數(shù)據(jù)進行進一步提煉，將數(shù)據(jù)標簽化，構建全息畫像等標簽庫，支撐專題應用庫建設,并通過標簽中心產品對用戶及開發(fā)者開放。構建應用，服務業(yè)務按照業(yè)務場景需求，將基礎庫、主題庫和專題庫等進一步組合利用，可構建起各類業(yè)務創(chuàng)新應用，如監(jiān)控大屏、全息畫像、預警中心等應用。通過數(shù)據(jù)服務平臺，可以把數(shù)據(jù)和標簽在線服務化提供給開發(fā)者和用戶。數(shù)據(jù)深度治理構建業(yè)務庫目錄01平臺總體建設方案02平臺功能建設方案03資源中心建設方案04平臺建設應用效果構建了大數(shù)據(jù)管理整體能力數(shù)據(jù)資產管理數(shù)據(jù)資產管理能力是指數(shù)據(jù)倉庫（實時數(shù)倉、離線數(shù)倉）建設、數(shù)據(jù)質量監(jiān)控、數(shù)據(jù)指標體系等數(shù)據(jù)管理能力，將數(shù)據(jù)定義為一種資產或服務為業(yè)務賦能數(shù)據(jù)開放能力數(shù)據(jù)不能僅僅止步于數(shù)據(jù)倉庫，變成死數(shù)據(jù)，流轉起來的數(shù)據(jù)才能發(fā)揮其價值，數(shù)據(jù)開放共享能力需要某省市公安公安在數(shù)據(jù)需求方面的予取予求，指哪打哪，精準賦能開發(fā)協(xié)作調度開發(fā)協(xié)作調度能力主要解決數(shù)據(jù)處理的效率問題，通過開發(fā)平臺的方式提升離線分析、實時分析等數(shù)據(jù)處理效率，提升數(shù)據(jù)流通速度數(shù)據(jù)采集遷移數(shù)據(jù)采集遷移能力解決數(shù)據(jù)源頭問題，通過統(tǒng)一的方式收集業(yè)務數(shù)據(jù)，在合規(guī)合法的范圍內采集所需要的數(shù)據(jù)。同時能夠完成數(shù)據(jù)在遷移流轉匯聚了大量公安數(shù)據(jù)資產公安大數(shù)據(jù)中心數(shù)據(jù)匯聚了大量各類物聯(lián)設備等非結構化熱數(shù)據(jù)以及結構化數(shù)據(jù)，近半年來平臺匯聚的數(shù)據(jù)資源量如下：抓拍人臉數(shù)據(jù)2億張公安資源數(shù)據(jù)10億條抓拍車輛數(shù)據(jù)6億張企事業(yè)單位數(shù)據(jù)10億條實時Mac數(shù)據(jù)10億條社會資源數(shù)據(jù)10億條實現(xiàn)了數(shù)據(jù)管理可視化盤點、規(guī)劃、獲取數(shù)據(jù)資源，并將所有數(shù)據(jù)資源進行完整呈現(xiàn)；通過元數(shù)據(jù)信息收集、數(shù)據(jù)探查、數(shù)據(jù)權限申請授權等手段，解決”哪些數(shù)據(jù)可用“、”到哪里可以找到數(shù)據(jù)“的難題，提升數(shù)據(jù)資源的利用率。同時，可以直接為管理者和決策者提供數(shù)據(jù)支撐，降低了管理成本，讓數(shù)據(jù)變得看得見