基于-大數(shù)據(jù)的數(shù)據(jù)治理

《基于-大數(shù)據(jù)的數(shù)據(jù)治理》由會員上傳分享，免費在線閱讀，更多相關(guān)內(nèi)容在應(yīng)用文檔-天天文庫。

1、基于大數(shù)據(jù)的數(shù)據(jù)治理建設(shè)方案目錄一數(shù)據(jù)管理的現(xiàn)狀3二數(shù)據(jù)治理的概述4（一）數(shù)據(jù)治理概念4（二）數(shù)據(jù)治理目標5三數(shù)據(jù)治理體系5四數(shù)據(jù)治理核心領(lǐng)域6（一）數(shù)據(jù)模型6（二）數(shù)據(jù)生命周期6（三）數(shù)據(jù)標準8（四）主數(shù)據(jù)9（五）數(shù)據(jù)質(zhì)量10（六）數(shù)據(jù)服務(wù)12（七）數(shù)據(jù)安全12五數(shù)據(jù)治理保障機制13（一）制度章程13(1)規(guī)章制度13(2)管控辦法13(3)考核機制13（二）數(shù)據(jù)治理組織15(1)組織架構(gòu)15(2)組織層次16(3)組織職責17（三）流程管理19（四）IT技術(shù)應(yīng)用19(1)支撐平臺19(2)技術(shù)規(guī)范22附件A數(shù)據(jù)管理規(guī)范23附件B數(shù)據(jù)質(zhì)量評估辦法38附件C數(shù)據(jù)質(zhì)量管理流程42關(guān)于數(shù)據(jù)治理的

2、理解1.數(shù)據(jù)管理的現(xiàn)狀根據(jù)行業(yè)信息化發(fā)展的現(xiàn)狀，結(jié)合當今行業(yè)數(shù)據(jù)治理的要求，大型集團或政務(wù)管理部門現(xiàn)階段數(shù)據(jù)管理方面存在以下的不足：（1）數(shù)據(jù)多頭管理，缺少專門對數(shù)據(jù)管理進行監(jiān)督和控制的組織。信息系統(tǒng)的建設(shè)和管理職能分散在各部門，致使數(shù)據(jù)管理的職責分散，權(quán)責不明確。組織機構(gòu)各部門關(guān)注數(shù)據(jù)的角度不一樣，缺少一個組織從全局的視角對數(shù)據(jù)進行管理，導致無法建立統(tǒng)一的數(shù)據(jù)管理規(guī)程、標準等，相應(yīng)的數(shù)據(jù)管理監(jiān)督措施無法得到落實。組織機構(gòu)的數(shù)據(jù)考核體系也尚未建立，無法保障數(shù)據(jù)管理標準和規(guī)程的有效執(zhí)行。（2）多系統(tǒng)分散建設(shè)，沒有規(guī)范統(tǒng)一的省級數(shù)據(jù)標準和數(shù)據(jù)模型。組織機構(gòu)為應(yīng)對迅速變化的市場和社會需求，逐步建立

3、了各自的信息系統(tǒng)，各部門站在各自的立場生產(chǎn)、使用和管理數(shù)據(jù)，使得數(shù)據(jù)分散在不同的部門和信息系統(tǒng)中，缺乏統(tǒng)一的數(shù)據(jù)規(guī)劃、可信的數(shù)據(jù)來源和數(shù)據(jù)標準，導致數(shù)據(jù)不規(guī)范、不一致、冗余、無法共享等問題出現(xiàn)，組織機構(gòu)各部門對數(shù)據(jù)的理解難以應(yīng)用一致的語言來描述，導致理解不一致。（3）缺少統(tǒng)一的主數(shù)據(jù)，組織機構(gòu)核心系統(tǒng)間的人員等主要信息并不是存儲在一個獨立的系統(tǒng)中，或者不是通過統(tǒng)一的業(yè)務(wù)管理流程在系統(tǒng)間維護。缺乏對集團公司或政務(wù)單位主數(shù)據(jù)的管理，就無法保障主數(shù)據(jù)在整個業(yè)務(wù)范圍內(nèi)保持一致、完整和可控，導致業(yè)務(wù)數(shù)據(jù)正確性無法得到保障。（4）缺乏統(tǒng)一的集團型數(shù)據(jù)質(zhì)量管理流程體系。當前現(xiàn)狀中數(shù)據(jù)質(zhì)量管理主要由各組織部

4、門分頭進行；跨局跨部門的數(shù)據(jù)質(zhì)量溝通機制不完善；缺乏清晰的跨局跨部門的數(shù)據(jù)質(zhì)量管控規(guī)范與標準，數(shù)據(jù)分析隨機性強，存在業(yè)務(wù)需求不清的現(xiàn)象，影響數(shù)據(jù)質(zhì)量；數(shù)據(jù)的自動采集尚未全面實現(xiàn)，處理過程存在人為干預問題，很多部門存在數(shù)據(jù)質(zhì)量管理人員不足、知識與經(jīng)驗不夠、監(jiān)管方式不全面等問題；缺乏完善的數(shù)據(jù)質(zhì)量管控流程和系統(tǒng)支撐能力。（5）數(shù)據(jù)全生命周期管理不完整。目前，大型集團或政務(wù)單位，數(shù)據(jù)的產(chǎn)生、使用、維護、備份到過時被銷毀的數(shù)據(jù)生命周期管理規(guī)范和流程還不完善，不能確定過期和無效數(shù)據(jù)的識別條件，且非結(jié)構(gòu)化數(shù)據(jù)未納入數(shù)據(jù)生命周期的管理范疇；無信息化工具支撐數(shù)據(jù)生命周期狀態(tài)的查詢，未有效利用元數(shù)據(jù)管理。1.

5、數(shù)據(jù)治理的概述1.1數(shù)據(jù)治理概念數(shù)據(jù)治理是指將數(shù)據(jù)作為組織資產(chǎn)而展開的一系列的具體化工作,是對數(shù)據(jù)的全生命周期管理。數(shù)據(jù)治理體系是指從組織架構(gòu)、管理制度、操作規(guī)范、IT應(yīng)用技術(shù)、績效考核支持等多個維度對組織的數(shù)據(jù)模型、數(shù)據(jù)架構(gòu)、數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全、數(shù)據(jù)生命周期等各方面進行全面的梳理、建設(shè)以及持續(xù)改進的體系。1.2數(shù)據(jù)治理目標數(shù)據(jù)治理的目標是提高數(shù)據(jù)的質(zhì)量（準確性和完整性），保證數(shù)據(jù)的安全性（保密性、完整性及可用性），實現(xiàn)數(shù)據(jù)資源在各組織機構(gòu)部門的共享；推進信息資源的整合、對接和共享，從而提升集團公司或政務(wù)單位信息化水平，充分發(fā)揮信息化作用。1.數(shù)據(jù)治理體系數(shù)據(jù)治理體系包含兩個方面，一是數(shù)據(jù)質(zhì)

6、量核心領(lǐng)域，二是數(shù)據(jù)質(zhì)量保障機制。具體兩者內(nèi)容及相互關(guān)系可以參見下圖：2.數(shù)據(jù)治理核心領(lǐng)域為了有效管理信息資源，必須構(gòu)集團級數(shù)據(jù)治理體系。數(shù)據(jù)治理體系包含數(shù)據(jù)治理組織、數(shù)據(jù)構(gòu)架管理、主數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)服務(wù)管理及數(shù)據(jù)安全管理內(nèi)容，這些內(nèi)容既有機結(jié)合，又相互支撐。1.1數(shù)據(jù)模型數(shù)據(jù)模型是數(shù)據(jù)構(gòu)架中重要一部分，包括概念數(shù)據(jù)模型和邏輯數(shù)據(jù)模型，是數(shù)據(jù)治理的關(guān)鍵、重點。理想的數(shù)據(jù)模型應(yīng)該具有非冗余、穩(wěn)定、一致、易用等特征。邏輯數(shù)據(jù)模型能涵蓋整個集團的業(yè)務(wù)范圍，以一種清晰的表達方式記錄跟蹤集團單位的重要數(shù)據(jù)元素及其變動，并利用它們之間各種可能的限制條件和關(guān)系來表達重要的業(yè)務(wù)規(guī)則。數(shù)據(jù)模型必須

7、在設(shè)計過程中保持統(tǒng)一的業(yè)務(wù)定義。為了滿足將來不同的應(yīng)用分析需要，邏輯數(shù)據(jù)模型的設(shè)計應(yīng)該能夠支持最小粒度的詳細數(shù)據(jù)的存儲，以支持各種可能的分析查詢。同時保障邏輯數(shù)據(jù)模型能夠最大程度上減少冗余，并保障結(jié)構(gòu)具有足夠的靈活性和擴展性1.2數(shù)據(jù)生命周期一般包括數(shù)據(jù)生成及傳輸、數(shù)據(jù)存儲、數(shù)據(jù)處理及應(yīng)用、數(shù)據(jù)銷毀四個方面。（1）數(shù)據(jù)生成及傳輸數(shù)據(jù)應(yīng)該能夠按照數(shù)據(jù)質(zhì)量標準和發(fā)展需要產(chǎn)生，應(yīng)采取措施保證數(shù)據(jù)的準確性和完整性，業(yè)