背景
現(xiàn)代企業(yè)日常各項(xiàng)經(jīng)營(yíng)活動(dòng)中積累了大量數(shù)據(jù)資源,這些數(shù)據(jù)除了支持企業(yè)生產(chǎn)業(yè)務(wù)流程運(yùn)轉(zhuǎn)之外,也越來越多地被用于支撐監(jiān)管報(bào)送和信息披露、精準(zhǔn)營(yíng)銷、決策支持、風(fēng)險(xiǎn)控制、產(chǎn)品定價(jià)、績(jī)效考核等運(yùn)營(yíng)管理和決策過程的數(shù)據(jù)分析需求。
市場(chǎng)正逐漸從賣方市場(chǎng)轉(zhuǎn)變?yōu)橘I方市場(chǎng),互聯(lián)網(wǎng)的普及更加推動(dòng)了這個(gè)市場(chǎng)轉(zhuǎn)變的速度。為了適應(yīng)新的市場(chǎng)環(huán)境的生存和發(fā)展要求,企業(yè)要實(shí)現(xiàn)全方位的轉(zhuǎn)型,需要更為科學(xué)的決策方式,需要對(duì)客戶的需求做出更快速的反應(yīng),需要不斷提高內(nèi)部的經(jīng)營(yíng)效率,需要有效化解瞬息萬(wàn)變的市場(chǎng)帶來的風(fēng)險(xiǎn)等等,而這些轉(zhuǎn)型的落地離不開經(jīng)營(yíng)管理和決策過程的優(yōu)化和升級(jí),而現(xiàn)實(shí)中企業(yè)日常經(jīng)營(yíng)管理和決策過程的背后,實(shí)質(zhì)上是相關(guān)數(shù)據(jù)資源的加工和利用過程,從大量原始數(shù)據(jù)的基礎(chǔ)上加工形成支撐各類決策需求的分析型數(shù)據(jù),從而幫助各級(jí)決策者及時(shí)獲取做出準(zhǔn)確決策所需要的關(guān)鍵信息。
而另外一個(gè)方面,雖然當(dāng)前企業(yè)各項(xiàng)經(jīng)營(yíng)活動(dòng)已經(jīng)積累了大量的數(shù)據(jù)資源,如果不能對(duì)這些數(shù)據(jù)資源進(jìn)行有效管理,不能迅速地對(duì)這些數(shù)據(jù)資源進(jìn)行專業(yè)化處理,通過“加工”來實(shí)現(xiàn)數(shù)據(jù)資源的“增值”,其對(duì)經(jīng)營(yíng)管理和決策過程轉(zhuǎn)型升級(jí)的價(jià)值就得不到很好體現(xiàn),甚至?xí)o運(yùn)營(yíng)管理和決策帶來負(fù)面制約作用,阻礙了企業(yè)應(yīng)對(duì)市場(chǎng)生存挑戰(zhàn)的轉(zhuǎn)型和變革。因此企業(yè)需要一把開啟數(shù)據(jù)資源金庫(kù)大門而實(shí)現(xiàn)在互聯(lián)網(wǎng)時(shí)代業(yè)務(wù)價(jià)值倍增的鑰匙。
經(jīng)過多年的信息化建設(shè),當(dāng)前很多中國(guó)企業(yè)各項(xiàng)經(jīng)營(yíng)活動(dòng)已經(jīng)實(shí)現(xiàn)了電子化處理,今天很多企業(yè),都會(huì)有很多套應(yīng)用系統(tǒng)支撐支持企業(yè)各項(xiàng)生產(chǎn)活動(dòng)業(yè)務(wù)流程運(yùn)轉(zhuǎn)和中后臺(tái)管理,每一套系統(tǒng)中都存有大量的數(shù)據(jù),積累了規(guī)模龐大而且內(nèi)容豐富的數(shù)據(jù)資源。
可是由于缺乏對(duì)現(xiàn)有數(shù)據(jù)資源統(tǒng)一管控的機(jī)制和技術(shù)平臺(tái),企業(yè)目前數(shù)據(jù)資源的分布很凌亂的局面沒有得到有效的直接管控,歷史原因的建設(shè)的不同步造成新老各類系統(tǒng)在建設(shè)過程中根據(jù)自己的需求各自為政而形成了數(shù)據(jù)割據(jù)和數(shù)據(jù)孤島的存在,表現(xiàn)為數(shù)據(jù)定義不統(tǒng)一、各系統(tǒng)之間數(shù)據(jù)不合理冗余,形成多頭交叉的局面,特別是使用多年的老舊系統(tǒng)的存量數(shù)據(jù)所表現(xiàn)出來的數(shù)據(jù)不完整、數(shù)據(jù)內(nèi)容過時(shí)失效等質(zhì)量問題比較嚴(yán)重,這類問題給不少規(guī)劃建設(shè)的新系統(tǒng)的上線運(yùn)行帶來了很大的障礙,客觀上嚴(yán)重削弱了多年來企業(yè)花大力投入信息化建設(shè)的成效和價(jià)值體現(xiàn)。而且企業(yè)的戰(zhàn)略成長(zhǎng)需要信息科技應(yīng)用水平向更高層次的邁進(jìn),這樣的數(shù)據(jù)資源局面會(huì)隨著更多的企業(yè)信息披露和監(jiān)管報(bào)送、ECIF、客戶關(guān)系管理系統(tǒng)(CRM)、內(nèi)部資金定價(jià)(FTP)、績(jī)效考核、風(fēng)險(xiǎn)管理、資產(chǎn)管理等企業(yè)級(jí)應(yīng)用系統(tǒng)的陸續(xù)建設(shè)和投產(chǎn)所暴露出來,而數(shù)據(jù)質(zhì)量問題已經(jīng)成為嚴(yán)重制約企業(yè)整體信息科技應(yīng)用水平和價(jià)值提升的障礙,事實(shí)上目前大多數(shù)中國(guó)企業(yè)的數(shù)據(jù)資源也無法為客戶營(yíng)銷、精細(xì)化管理、風(fēng)險(xiǎn)控制、決策支持等當(dāng)下企業(yè)業(yè)務(wù)向互聯(lián)網(wǎng)+轉(zhuǎn)型所必需的工作帶來有效助力,因此,如果我們不能通過有效的數(shù)據(jù)治理工作來扭轉(zhuǎn)這樣的局面,不但企業(yè)多年信息化建設(shè)所形成的信息資產(chǎn)價(jià)值得不到很好體現(xiàn),而且必然會(huì)由于跟不上運(yùn)營(yíng)管理和決策的數(shù)據(jù)需求而給企業(yè)的戰(zhàn)略轉(zhuǎn)型帶來負(fù)面作用。
企業(yè)戰(zhàn)略轉(zhuǎn)型急需信息科技扭轉(zhuǎn)這種數(shù)據(jù)資源管控缺失的局面,為了使這些數(shù)據(jù)資源“包袱”變成“金礦”,有力支持信息科技工作達(dá)到預(yù)期的規(guī)劃目標(biāo),通過建設(shè)和形成有效的數(shù)據(jù)治理體系來統(tǒng)一管控好數(shù)據(jù)資源就變得尤為重要和迫切。
二、數(shù)據(jù)治理平臺(tái)定位
根據(jù)國(guó)際先進(jìn)理念,數(shù)據(jù)治理是一個(gè)關(guān)注于在執(zhí)行層面如何讓各項(xiàng)數(shù)據(jù)資源實(shí)現(xiàn)業(yè)務(wù)戰(zhàn)略價(jià)值需求的體系,成功的數(shù)據(jù)治理工作的實(shí)施是數(shù)據(jù)管控機(jī)制和數(shù)據(jù)管控領(lǐng)域的有效結(jié)合,得到業(yè)界普遍共識(shí)的數(shù)據(jù)治理體系架構(gòu)包含以下內(nèi)容
與國(guó)際普遍認(rèn)可的成熟的數(shù)據(jù)治理體系框架模型相對(duì)照,很多企業(yè)目前雖然也有部分?jǐn)?shù)據(jù)治理工作,但整體來看缺失的內(nèi)容還很多,而且現(xiàn)有的數(shù)據(jù)治理方面的工作成果和企業(yè)的業(yè)務(wù)運(yùn)營(yíng)管理和信息科技建設(shè)工作都沒能很好地結(jié)合起來,目前并沒有形成從全企業(yè)的角度統(tǒng)籌安排的數(shù)據(jù)管控機(jī)制,也沒有一個(gè)技術(shù)平臺(tái)支撐包括數(shù)據(jù)質(zhì)量管理和數(shù)據(jù)標(biāo)準(zhǔn)管理的活動(dòng),這也讓我們應(yīng)該清醒認(rèn)識(shí)到數(shù)據(jù)治理是一項(xiàng)意義重大、影響廣泛而且任重而道遠(yuǎn)的系統(tǒng)性長(zhǎng)期性的工程。
同時(shí)我們要客觀分析企業(yè)的現(xiàn)實(shí)情況,當(dāng)下很多企業(yè)信息化還在大規(guī)模集中建設(shè)期,各項(xiàng)信息系統(tǒng)的建設(shè)和優(yōu)化升級(jí)工作正在如火如荼的開展之中,如前述所述,老舊系統(tǒng)的存量數(shù)據(jù)質(zhì)量問題的矛盾非常突出,很多業(yè)務(wù)創(chuàng)新和市場(chǎng)營(yíng)銷的數(shù)據(jù)需求遠(yuǎn)遠(yuǎn)得不到滿足,而新業(yè)務(wù)系統(tǒng)上線后由于數(shù)據(jù)質(zhì)量問題而造成的生產(chǎn)問題也時(shí)有發(fā)生,擺在企業(yè)當(dāng)前數(shù)據(jù)治理工作的燃眉之急是盡快解決影響信息系統(tǒng)推廣應(yīng)用效果和業(yè)務(wù)用戶體驗(yàn)問題的各種數(shù)據(jù)質(zhì)量問題,時(shí)不我待,先構(gòu)筑一個(gè)大而全的成熟數(shù)據(jù)治理體系再考慮具體問題的解決無疑是不能適應(yīng)企業(yè)迫切的當(dāng)前發(fā)展需要的。
因此,對(duì)于企業(yè)所要開展的數(shù)據(jù)治理工作,我提出以解決當(dāng)前業(yè)務(wù)所遇到的數(shù)據(jù)質(zhì)量問題為抓手,以構(gòu)建的技術(shù)平臺(tái)支撐各項(xiàng)解決問題的數(shù)據(jù)治理工作實(shí)施的總體策略,參考業(yè)界數(shù)據(jù)治理體系框架模型,在企業(yè)最高領(lǐng)導(dǎo)層的統(tǒng)籌安排下,由信息科技部門牽頭平臺(tái)建設(shè)和配套的數(shù)據(jù)治理實(shí)施工作,以高效解決當(dāng)前信息科技成果推廣中遇到的數(shù)據(jù)質(zhì)量問題為切入點(diǎn),在實(shí)施中整合信息科技部與業(yè)務(wù)部門的知識(shí)和意見,由科技部牽頭通過引入成熟的技術(shù)支撐平臺(tái)和實(shí)施服務(wù),配套推動(dòng)能在企業(yè)落地執(zhí)行的數(shù)據(jù)管控機(jī)制和組織建設(shè),形成對(duì)企業(yè)的信息科技數(shù)據(jù)資源進(jìn)行全方位的監(jiān)管和控制體系,讓對(duì)數(shù)據(jù)資源的統(tǒng)一管控在業(yè)務(wù)部門與信息科技部門達(dá)成高度共識(shí)和建設(shè)性合作機(jī)制,以求在解決各系統(tǒng)各項(xiàng)目的實(shí)際問題中逐步形成對(duì)數(shù)據(jù)資源的良性治理體系。
因此,我認(rèn)為首先要明確數(shù)據(jù)治理體系和系統(tǒng)平臺(tái)建設(shè)工作的定位是管控,對(duì)于管控定位的具體體現(xiàn)在以下三個(gè)方面。
ü 從職能分工的角度,數(shù)據(jù)治理平臺(tái)體現(xiàn)了代表企業(yè)戰(zhàn)略決策層對(duì)于數(shù)據(jù)資源的統(tǒng)一管控的職能要求定位,數(shù)據(jù)治理平臺(tái)側(cè)重在管控層面的計(jì)劃和控制,具體數(shù)據(jù)問題的解決通過協(xié)調(diào)跨部門跨系統(tǒng)的資源予以實(shí)施和改進(jìn),這樣更符合現(xiàn)代公司治理理念的管運(yùn)分離原則,這樣一方面解決目前企業(yè)在數(shù)據(jù)資源管理工作中存在的多頭交叉而缺失統(tǒng)籌安排的問題,二方面能從管控的高度治理具體數(shù)據(jù)問題的時(shí)候能協(xié)調(diào)更大范圍內(nèi)有關(guān)資源,治理主體的分工責(zé)任更加明確,這樣在效率和效果上更加可控;
ü 從范圍來講,數(shù)據(jù)治理涵蓋了企業(yè)所有信息資產(chǎn)和數(shù)據(jù)資源全生命周期的不同形態(tài),從前端生產(chǎn)系統(tǒng)數(shù)據(jù)來源到后端運(yùn)營(yíng)管理和決策的數(shù)據(jù)分析和輸出呈現(xiàn),形成一個(gè)端對(duì)端的數(shù)據(jù)閉環(huán)管控體系;
ü 從實(shí)施策略的角度,以解決后端數(shù)據(jù)分析成果輸出的數(shù)據(jù)質(zhì)量問題給各項(xiàng)業(yè)務(wù)運(yùn)營(yíng)管理和決策帶來的困擾為導(dǎo)向,通過建設(shè)技術(shù)平臺(tái)有效支撐相應(yīng)治理過程的管控活動(dòng),通過技術(shù)手段準(zhǔn)確監(jiān)控造成數(shù)據(jù)質(zhì)量問題的來龍去脈和前因后果,以對(duì)癥把脈輔助具體治理活動(dòng)背后良好管控機(jī)制的形成,形成的相關(guān)部門人員通力合作齊抓共管根除數(shù)據(jù)質(zhì)量問題的針對(duì)性方案,最終通過每項(xiàng)問題的落地解決逐步積累企業(yè)開展數(shù)據(jù)治理工作的成功經(jīng)驗(yàn),對(duì)照成熟的數(shù)據(jù)治理體系框架逐步形成高水平的治理能力。
三、數(shù)據(jù)治理目標(biāo)場(chǎng)景分析
為了更好地陳述企業(yè)開展數(shù)據(jù)治理工作的目標(biāo)場(chǎng)景,我們首先總結(jié)一下當(dāng)前缺乏有效管控而造成的數(shù)據(jù)亂象,具體表現(xiàn)為:
一是由于很多企業(yè)目前還沒有明確的數(shù)據(jù)管控責(zé)任主體組織,對(duì)數(shù)據(jù)采集、分布、流轉(zhuǎn)及應(yīng)用的數(shù)據(jù)分布、加工、利用缺乏合理規(guī)劃和控制,數(shù)據(jù)需求、數(shù)據(jù)質(zhì)量、數(shù)據(jù)應(yīng)用等問題的管理和解決分散在不同業(yè)務(wù)和技術(shù)部門,沒有一個(gè)清晰的協(xié)調(diào)機(jī)制和統(tǒng)一的報(bào)告渠道,業(yè)務(wù)部門不能及時(shí)、按需獲得數(shù)據(jù)支持;科技部門也不具備把業(yè)務(wù)需求快速定位到已有的信息資產(chǎn)和數(shù)據(jù)資源等能力,對(duì)于數(shù)據(jù)需求和數(shù)據(jù)問題缺乏有效解決的方法和途徑,基本靠各系統(tǒng)各項(xiàng)目各自來解決和消化;缺乏規(guī)范全面的數(shù)據(jù)質(zhì)量治理流程和考核機(jī)制,不能及時(shí)發(fā)現(xiàn)生產(chǎn)源頭的數(shù)據(jù)質(zhì)量問題,及時(shí)要求有關(guān)責(zé)任部門進(jìn)行整改;
二是很多企業(yè)缺乏統(tǒng)一解決數(shù)據(jù)質(zhì)量問題的組織和流程,目前各業(yè)務(wù)部門遇到質(zhì)量問題的時(shí)候紛紛以新增需求或者變更需求的方式向信息科技部提出申請(qǐng),把很多管理和業(yè)務(wù)上需要改進(jìn)來解決的問題轉(zhuǎn)變成信息科技的技術(shù)需求要求解決,這樣的做法本身就是治標(biāo)不治本的,而且這種應(yīng)急性、臨時(shí)性的需求提出和滿足占用了信息科技部大量的技術(shù)資源來配合,而得到的是一些并不規(guī)范和難以管理、復(fù)用的代碼資產(chǎn),信息科技部又不得不分散了大量的資源來長(zhǎng)期維護(hù),一方面的這類的需求層出不窮地涌現(xiàn),另外一方面這些價(jià)值不大的開發(fā)成果又浪費(fèi)了大量的科技資源長(zhǎng)期維護(hù),導(dǎo)致企業(yè)信息科技投資的回報(bào)率偏低,很多的資源投入無法體現(xiàn)出應(yīng)該有的價(jià)值。
三是雖然有些企業(yè)已經(jīng)頒布了《企業(yè)數(shù)據(jù)標(biāo)準(zhǔn)》,但由于一方面數(shù)據(jù)標(biāo)準(zhǔn)的定義不完整,常見的缺失是沒有完成邏輯模型和物理模型的技術(shù)定義,因此不能被各信息系統(tǒng)建設(shè)項(xiàng)目在做數(shù)據(jù)庫(kù)采集和數(shù)據(jù)存儲(chǔ)設(shè)計(jì)的時(shí)候直接遵照;另外一方面《企業(yè)數(shù)據(jù)標(biāo)準(zhǔn)》雖然可能提出了數(shù)據(jù)分類,但并未能把標(biāo)準(zhǔn)中的數(shù)據(jù)分類和具體的信息科技系統(tǒng)和在建的信息科技項(xiàng)目建立清晰的關(guān)系對(duì)照,也缺失這個(gè)對(duì)于數(shù)據(jù)標(biāo)準(zhǔn)化成果在各信息化建設(shè)項(xiàng)目的標(biāo)準(zhǔn)化貫徹實(shí)施落地方面的評(píng)審檢查措施,帶來了數(shù)據(jù)標(biāo)準(zhǔn)化要求管理不到位的問題。這樣事實(shí)上企業(yè)不同信息系統(tǒng)在建設(shè)過程中并未遵照統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)要求進(jìn)行各自的數(shù)據(jù)模型的設(shè)計(jì),未能從設(shè)計(jì)源頭就避免出現(xiàn)數(shù)據(jù)技術(shù)定義割據(jù)的問題,由于缺乏統(tǒng)一的技術(shù)標(biāo)準(zhǔn)要求,不同系統(tǒng)的數(shù)據(jù)模型難以邏輯上集成,難以建立全面、準(zhǔn)確、完整地反映運(yùn)營(yíng)狀況的單一數(shù)據(jù)視圖,而面對(duì)諸如信息披露和監(jiān)管報(bào)送、客戶細(xì)分這樣的數(shù)據(jù)利用需求的時(shí)候,每次都要根據(jù)需求反復(fù)開發(fā)針對(duì)性數(shù)據(jù)集成的代碼,難以做到數(shù)據(jù)的邏輯整合和加工利用邏輯復(fù)用。
從根本上解決這些問題,有待企業(yè)級(jí)的數(shù)據(jù)治理平臺(tái)建成使用以及配套的保障機(jī)制逐步建立后,原來頭痛醫(yī)頭腳痛醫(yī)腳的解決方式才能被更合理和高效的方法所取代。
l 經(jīng)過數(shù)據(jù)治理平臺(tái)管控的數(shù)據(jù)已經(jīng)消除信息錯(cuò)誤、缺失、不規(guī)范的基礎(chǔ)數(shù)據(jù),統(tǒng)一監(jiān)管報(bào)送平臺(tái)完全可以壓縮或者取消目前報(bào)送前大量的手工數(shù)據(jù)補(bǔ)錄、調(diào)整和數(shù)據(jù)核對(duì)工作,實(shí)現(xiàn)自動(dòng)化報(bào)送,解放人力資源、提高報(bào)送時(shí)效性和監(jiān)管機(jī)構(gòu)對(duì)企業(yè)的滿意度。
l 建立統(tǒng)一的技術(shù)數(shù)據(jù)標(biāo)準(zhǔn)以有效管控各系統(tǒng)在數(shù)據(jù)定義方面的不一致,規(guī)范數(shù)據(jù)來源,統(tǒng)一客戶信息標(biāo)準(zhǔn),經(jīng)過數(shù)據(jù)質(zhì)量平臺(tái)的多次校驗(yàn)和源數(shù)據(jù)平臺(tái)對(duì)數(shù)據(jù)的修正后,各個(gè)系統(tǒng)的客戶信息會(huì)達(dá)到一致,ECIF中的客戶信息就可以代表各個(gè)系統(tǒng)中的客戶信息,各個(gè)系統(tǒng)中的信息也將同步一致。
l 在建項(xiàng)目將來將統(tǒng)一經(jīng)過數(shù)據(jù)標(biāo)準(zhǔn)化和數(shù)據(jù)質(zhì)量管理后的數(shù)據(jù)倉(cāng)庫(kù)/ODS等作為統(tǒng)一數(shù)據(jù)來源提供,將不會(huì)存在多個(gè)系統(tǒng)同時(shí)供數(shù)、各自有各自標(biāo)準(zhǔn)的情況。
四、數(shù)據(jù)治理平臺(tái)建設(shè)內(nèi)容建議
根據(jù)以上分析,數(shù)據(jù)治理工作是一項(xiàng)影響廣大深遠(yuǎn)而復(fù)雜長(zhǎng)期的過程,牽一發(fā)而動(dòng)全身,數(shù)據(jù)治理每項(xiàng)工作都牽扯到跨部門、跨系統(tǒng)的信息傳遞和資料共享,做好數(shù)據(jù)的管控工作首先需要大量的溝通和信息流轉(zhuǎn),沒有技術(shù)平臺(tái)來支撐各項(xiàng)數(shù)據(jù)治理的管控工作等于人體缺了中樞神經(jīng)系統(tǒng),舉步維艱是必然的。而結(jié)合企業(yè)常見的數(shù)據(jù)治理領(lǐng)域重點(diǎn)工作,可以近期首先引入建設(shè)數(shù)據(jù)標(biāo)準(zhǔn)和元數(shù)據(jù)管理系統(tǒng)和數(shù)據(jù)質(zhì)量管理系統(tǒng),以下是我對(duì)這兩個(gè)系統(tǒng)的建設(shè)內(nèi)容的初步分析,各企業(yè)后續(xù)在項(xiàng)目建設(shè)要求和需求分析階段還要逐步做更全面的補(bǔ)充。
一、數(shù)據(jù)標(biāo)準(zhǔn)和元數(shù)據(jù)管理系統(tǒng):通過建立一整套數(shù)據(jù)規(guī)范、管控流程和技術(shù)工具來確保企業(yè)各種重要信息資產(chǎn)和數(shù)據(jù)資源,包括產(chǎn)品、客戶、機(jī)構(gòu)、賬戶等信息在企業(yè)內(nèi)外使用和交換的表達(dá)上是一致和準(zhǔn)確的,數(shù)據(jù)標(biāo)準(zhǔn)可分為技術(shù)標(biāo)準(zhǔn)和業(yè)務(wù)標(biāo)準(zhǔn)。針對(duì)企業(yè)現(xiàn)有情況,針對(duì)標(biāo)準(zhǔn)不統(tǒng)一的問題,通過在數(shù)據(jù)治理平臺(tái)首先把所有數(shù)據(jù)資源的圖紙---元數(shù)據(jù)資源集中管起來,然后建立各系統(tǒng)元數(shù)據(jù)資源和數(shù)據(jù)標(biāo)準(zhǔn)要求清晰的對(duì)照關(guān)系,依此扎扎實(shí)實(shí)地實(shí)現(xiàn)數(shù)據(jù)標(biāo)準(zhǔn)管理功能落到各系統(tǒng)的數(shù)據(jù)模型設(shè)計(jì)細(xì)節(jié)。提供管理業(yè)務(wù)、技術(shù)元數(shù)據(jù),支持?jǐn)?shù)據(jù)溯源,有效支持企業(yè)“數(shù)據(jù)標(biāo)準(zhǔn)管控委員會(huì)”開展工作。對(duì)于已建和在建的各系統(tǒng),通過這個(gè)平臺(tái)匯總的數(shù)據(jù)模型資料對(duì)其設(shè)計(jì)的數(shù)據(jù)模型做好數(shù)據(jù)標(biāo)準(zhǔn)檢查工作,針對(duì)信息要素中的數(shù)據(jù)字段比對(duì)標(biāo)準(zhǔn)的業(yè)務(wù)定義,補(bǔ)充完善標(biāo)準(zhǔn)的技術(shù)定義,讓企業(yè)《企業(yè)數(shù)據(jù)標(biāo)準(zhǔn)》成為一個(gè)活學(xué)活用的標(biāo)準(zhǔn),并且在使用中不斷完善。以上管理工作可以通過業(yè)界成熟的元數(shù)據(jù)管理管理予以支撐,通過元數(shù)據(jù)管理工具,不但可以把數(shù)據(jù)標(biāo)準(zhǔn)以模型的方式形式化,以便于各系統(tǒng)采用,而且也可以對(duì)各系統(tǒng)的數(shù)據(jù)模型文檔統(tǒng)一管理起來,也便于后期這些系統(tǒng)根據(jù)標(biāo)準(zhǔn)化要求進(jìn)行整改的設(shè)計(jì)檢查和評(píng)審,從設(shè)計(jì)源頭把數(shù)據(jù)標(biāo)準(zhǔn)管起來和用起來。
二、數(shù)據(jù)質(zhì)量管理系統(tǒng),這個(gè)系統(tǒng)有四方面的建設(shè)內(nèi)容:一方面要建設(shè)企業(yè)級(jí)數(shù)據(jù)質(zhì)量管理,覆蓋對(duì)企業(yè)所有數(shù)據(jù)的質(zhì)量管理活動(dòng),為所有數(shù)據(jù)質(zhì)量治理活動(dòng)的相關(guān)用戶提供統(tǒng)一的入口,對(duì)數(shù)據(jù)質(zhì)量問題做到全程追蹤和監(jiān)控,對(duì)數(shù)據(jù)質(zhì)量管理流程達(dá)成全面支撐;第二方面要建立全企業(yè)統(tǒng)一的數(shù)據(jù)質(zhì)量檢查機(jī)制,通過配置和導(dǎo)入數(shù)據(jù)質(zhì)量校驗(yàn)規(guī)則,執(zhí)行常態(tài)化的數(shù)據(jù)質(zhì)量例行檢查,生成數(shù)據(jù)質(zhì)量報(bào)告,輔助數(shù)據(jù)質(zhì)量評(píng)估和考核,以此從源頭推動(dòng)生產(chǎn)數(shù)據(jù)的創(chuàng)建者重視采集數(shù)據(jù)的質(zhì)量,結(jié)合元數(shù)據(jù)管理中的數(shù)據(jù)溯源,也有助于分析和反映有關(guān)質(zhì)量問題的影響沖擊面,讓大家直觀看到數(shù)據(jù)質(zhì)量問題的危害。第三方面要建立數(shù)據(jù)質(zhì)量管理系統(tǒng)與數(shù)據(jù)標(biāo)準(zhǔn)和元數(shù)據(jù)管理系統(tǒng)的交互,通過元數(shù)據(jù)集中管理數(shù)據(jù)質(zhì)量規(guī)則,并建立數(shù)據(jù)質(zhì)量規(guī)則與其它元數(shù)據(jù)的關(guān)聯(lián)關(guān)系,使數(shù)據(jù)質(zhì)量管理的分析和應(yīng)用能夠得到元數(shù)據(jù)的支撐。第四方面就是數(shù)據(jù)源采集要建立數(shù)據(jù)質(zhì)量管理系統(tǒng)和數(shù)據(jù)倉(cāng)庫(kù)/ODS系統(tǒng)的交互,為了避免數(shù)據(jù)治理平臺(tái)陷入大量的數(shù)據(jù)采集工作,我們初步設(shè)想通過數(shù)據(jù)倉(cāng)庫(kù)/ODS作為統(tǒng)一的數(shù)據(jù)源歸集,由數(shù)據(jù)倉(cāng)庫(kù)/ODS根據(jù)各數(shù)據(jù)源系統(tǒng)一模一樣的數(shù)據(jù)模型和數(shù)據(jù)內(nèi)容建立每日業(yè)務(wù)數(shù)據(jù)鏡像庫(kù),通過執(zhí)行本平臺(tái)根據(jù)管理生成的質(zhì)量檢查規(guī)則所提供的質(zhì)量檢查腳本對(duì)每日業(yè)務(wù)數(shù)據(jù)用批量方式進(jìn)行全樣數(shù)據(jù)質(zhì)量檢查,并生成質(zhì)量評(píng)估報(bào)告。
業(yè)界的數(shù)據(jù)治理平臺(tái)廠商目前能提供的工具平臺(tái)已經(jīng)比較成熟,功能性能各有千秋、各有特色,不過基本都是采用開放的技術(shù)架構(gòu)和接口設(shè)計(jì),實(shí)施上不會(huì)存在技術(shù)方面和企業(yè)各種現(xiàn)有信息系統(tǒng)資源不能接駁的問題。
五、數(shù)據(jù)治理實(shí)施風(fēng)險(xiǎn)分析和工作內(nèi)容建議
通過分析數(shù)據(jù)治理的重點(diǎn)工作,我們客觀評(píng)估了實(shí)施過程中可能存在的風(fēng)險(xiǎn),具體如下:
1、單單依靠科技部的力量來了解企業(yè)領(lǐng)導(dǎo)、業(yè)務(wù)部門、基層單位和網(wǎng)點(diǎn)對(duì)數(shù)據(jù)的具體需求(即了解數(shù)據(jù)的最終應(yīng)用)的工作實(shí)施較為困難,需要專業(yè)的團(tuán)隊(duì)配合科技部進(jìn)行調(diào)研、分析,通過了解模糊需求,然后采用業(yè)界成熟的方法和手段,抽絲剝繭,逐漸明確最終的數(shù)據(jù)需求。
2、由于企業(yè)涉及的數(shù)據(jù)量非常大,如果對(duì)所有的數(shù)據(jù)全部鋪開進(jìn)行治理的話,需要全企業(yè)的各方資源進(jìn)行傾斜,必然會(huì)對(duì)其他工作的進(jìn)展造成影響,因此,建議選取解決當(dāng)前業(yè)務(wù)部門要求強(qiáng)烈的監(jiān)管報(bào)送數(shù)據(jù)和客戶精細(xì)化分析數(shù)據(jù)質(zhì)量問題為著力點(diǎn),倒推出其數(shù)據(jù)來源的問題進(jìn)行重點(diǎn)整治,在該類數(shù)據(jù)治理得到價(jià)值體現(xiàn)后,再總結(jié)治理經(jīng)驗(yàn),然后逐步開展其他類型數(shù)據(jù)治理。
3、數(shù)據(jù)標(biāo)準(zhǔn)化管理必須和各系統(tǒng)大量的數(shù)據(jù)模型打交道,從標(biāo)準(zhǔn)化要求的角度,分析該類數(shù)據(jù)包含的所有信息要素的技術(shù)定義,并進(jìn)行對(duì)應(yīng)邏輯數(shù)據(jù)建模和物理數(shù)據(jù)建模。此項(xiàng)工作的工作量非常巨大,建議在數(shù)據(jù)治理平臺(tái)實(shí)施的同時(shí),一方面引入業(yè)界有豐富經(jīng)驗(yàn)的數(shù)據(jù)建模專家加以輔導(dǎo)和幫助,另外一方面對(duì)各系統(tǒng)數(shù)據(jù)模型匯總分析求同存異,一步步形成企業(yè)數(shù)據(jù)標(biāo)準(zhǔn)的技術(shù)定義數(shù)據(jù)模型。
4、分析各類數(shù)據(jù)資源的業(yè)務(wù)和系統(tǒng)治理權(quán)責(zé)歸屬,此項(xiàng)工作可能涉及的利益沖突非常強(qiáng)烈,建議通過項(xiàng)目實(shí)施過程中建立管控機(jī)制,讓治理主體在背負(fù)一定責(zé)任的同時(shí)也能享受到對(duì)應(yīng)的利益。
5、數(shù)據(jù)治理工作可能需要對(duì)各個(gè)數(shù)據(jù)源系統(tǒng)進(jìn)行標(biāo)準(zhǔn)化及質(zhì)量提升的改造。此項(xiàng)工作復(fù)雜度較高,在確定需改造的源系統(tǒng)后,各個(gè)源系統(tǒng)的管理部門應(yīng)及時(shí)評(píng)估改造工作量及費(fèi)用預(yù)算,建議這些工作后續(xù)通過項(xiàng)目立項(xiàng)的方式來實(shí)施,企業(yè)應(yīng)給予充分的資源支持,而數(shù)據(jù)治理的責(zé)任主體對(duì)于這些項(xiàng)目的建設(shè)過程要負(fù)責(zé)全程跟蹤和控制。
因此,數(shù)據(jù)治理工作并不能盲目地認(rèn)為買一套工具就可以一錘定音地解決所有問題,多年積累下來的數(shù)據(jù)問題成因是復(fù)雜的,因此治理的過程也會(huì)是艱巨的。根據(jù)我的經(jīng)驗(yàn),數(shù)據(jù)治理的項(xiàng)目要通過大量服務(wù)性的實(shí)施工作內(nèi)容才能讓企業(yè)的目標(biāo)落地,畢竟技術(shù)平臺(tái)僅僅起到的是一個(gè)類似硬件基礎(chǔ)設(shè)施這樣的支撐作用,而數(shù)據(jù)治理管控工作的有效落地是離不開大量的規(guī)劃咨詢、訪談?wù){(diào)研、需求分析、數(shù)據(jù)模型分析、問題跟蹤工作的,而執(zhí)行數(shù)據(jù)治理過程還會(huì)涉及到一些具體的系統(tǒng)改造項(xiàng)目的跟蹤管理和數(shù)據(jù)質(zhì)量測(cè)試和檢查等工作。數(shù)據(jù)治理平臺(tái)的實(shí)施工作要包括以下類別的工作內(nèi)容:
1、 平臺(tái)建設(shè)工作,這里面包括了需求分析、架構(gòu)設(shè)計(jì)、開發(fā)部署、測(cè)試運(yùn)維等一般信息系統(tǒng)建設(shè)都會(huì)存在的工作。
2、 管控機(jī)制細(xì)化設(shè)計(jì)工作,一方面數(shù)據(jù)治理的機(jī)制包括政策、組織、流程等在實(shí)施過程中要不斷進(jìn)行大量配套細(xì)化和設(shè)計(jì)工作,企業(yè)在制定數(shù)據(jù)治理的政策、成立數(shù)據(jù)治理組織、制定數(shù)據(jù)治理的管控制度及工作流程這些方面缺乏相關(guān)業(yè)界經(jīng)驗(yàn),獨(dú)力承擔(dān)這項(xiàng)工作難免因?yàn)榍罢靶圆粔蚨斐煞磸?fù)修改來調(diào)整優(yōu)化,而制度的反復(fù)修改又會(huì)造成負(fù)面影響,所以需要在項(xiàng)目實(shí)施中引入有相關(guān)經(jīng)驗(yàn)的顧問資源結(jié)合企業(yè)實(shí)際情況幫助企業(yè)細(xì)化設(shè)計(jì)數(shù)據(jù)管控機(jī)制的內(nèi)容和實(shí)施路線。
3、 數(shù)據(jù)標(biāo)準(zhǔn)和數(shù)據(jù)建模工作,目前企業(yè)的數(shù)據(jù)標(biāo)準(zhǔn)缺失技術(shù)定義部分,要以邏輯數(shù)據(jù)模型和物理數(shù)據(jù)模型的方式予以補(bǔ)充完善,這樣才能形成各系統(tǒng)執(zhí)行使用的技術(shù)標(biāo)準(zhǔn)定義,才能指導(dǎo)各系統(tǒng)的標(biāo)準(zhǔn)化落地改造工作,而數(shù)據(jù)建模工作量非常大,所以本項(xiàng)目需要引入有經(jīng)驗(yàn)的數(shù)據(jù)建模方面的專家指導(dǎo)這項(xiàng)工作的有效開展,指導(dǎo)各系統(tǒng)各項(xiàng)目數(shù)據(jù)建模工作匹配企業(yè)的業(yè)務(wù)需求,分析企業(yè)現(xiàn)有的各系統(tǒng)的數(shù)據(jù)模型來制定數(shù)據(jù)標(biāo)準(zhǔn)中的技術(shù)定義。
4、 項(xiàng)目管理類工作,由于數(shù)據(jù)治理的落地執(zhí)行會(huì)產(chǎn)生一些對(duì)各系統(tǒng)的優(yōu)化改造要求,因此可能需要本項(xiàng)目對(duì)有關(guān)優(yōu)化改造項(xiàng)目有一定的項(xiàng)目管理職能,當(dāng)然這部分工作可以和企業(yè)現(xiàn)行的項(xiàng)目管理辦公室(PMO)機(jī)制有效融合起來。
5、 數(shù)據(jù)測(cè)試和檢查工作,由于本項(xiàng)目要和大量數(shù)據(jù)打交道,雖然數(shù)據(jù)清洗加工處理的主體責(zé)任在各系統(tǒng)和各業(yè)務(wù)部門,但從管控檢測(cè)的角度,數(shù)據(jù)測(cè)試和檢查這方面工作內(nèi)容也是不會(huì)少的。
數(shù)據(jù)治理實(shí)施策略
靖笙在相關(guān)實(shí)戰(zhàn)工作經(jīng)驗(yàn)基礎(chǔ)上,歸納總結(jié)出“上接戰(zhàn)略,下接績(jī)效;長(zhǎng)線投資,短線操作;工具破冰,服務(wù)壓軸;主流產(chǎn)品,專家定制;問題導(dǎo)入,全局把握”四十字作為送給廣大中國(guó)企業(yè)作為數(shù)據(jù)治理實(shí)施策略參考建議,供各企業(yè)領(lǐng)導(dǎo)在未來的建設(shè)要求、實(shí)施選型、過程管控、成果驗(yàn)收的相關(guān)決策參考。下文為四十字方針策略的對(duì)應(yīng)解釋。
ü上接戰(zhàn)略,下接績(jī)效:數(shù)據(jù)治理是實(shí)現(xiàn)IT規(guī)劃目標(biāo)架構(gòu)的重要舉措,務(wù)必需要從繼承IT規(guī)劃和近年建設(shè)成果的基礎(chǔ)上推行,這是從全企業(yè)特別是科技部的長(zhǎng)遠(yuǎn)利益的考慮,所以數(shù)據(jù)治理項(xiàng)目的實(shí)施要和IT規(guī)劃及當(dāng)前大規(guī)模集中開展的信息化建設(shè)項(xiàng)目群相向而行、無縫融合,而不能脫離IT規(guī)劃和PMO主導(dǎo)下只從數(shù)據(jù)資源加工處理的角度來實(shí)施,需要實(shí)施廠商對(duì)企業(yè)IT規(guī)劃和當(dāng)前項(xiàng)目群建設(shè)現(xiàn)狀有非常深入的了解和高度承接,這是企業(yè)上下要一致對(duì)外堅(jiān)持的底線,避免實(shí)施方對(duì)規(guī)劃要求的扯皮和偷梁換柱。而如前分析,數(shù)據(jù)質(zhì)量問題已經(jīng)高度撥動(dòng)了企業(yè)各層級(jí)的神經(jīng),對(duì)于企業(yè)信息科技工作的績(jī)效呈現(xiàn)強(qiáng)相關(guān)關(guān)系,數(shù)據(jù)就像汽車(IT系統(tǒng))的汽油,油品不好,再好的車也跑不快,數(shù)據(jù)治理工作要下接績(jī)效就是這個(gè)意思。
ü長(zhǎng)線投資,短線操作:從業(yè)界多年經(jīng)驗(yàn)來看,數(shù)據(jù)治理是一個(gè)長(zhǎng)期和逐步見效的過程,是戰(zhàn)略性的舉措,所以要理性冷靜地做長(zhǎng)線投資準(zhǔn)備,妄圖一錘子買賣就能萬(wàn)事大吉是不現(xiàn)實(shí)的,不要迷信哪些一招鮮一針頂破天的技術(shù)神話,因此必須在長(zhǎng)期投資的心態(tài)來制定實(shí)施路線。而在當(dāng)前我國(guó)企業(yè)常見的文化和組織氛圍中,數(shù)據(jù)質(zhì)量相關(guān)問題矛盾很尖銳,容不得猶豫拖延,所以在實(shí)施操作上,小步快跑、以點(diǎn)帶面的短線操作更符合各企業(yè)現(xiàn)狀要求。因此從策略上既要兼顧從長(zhǎng)計(jì)議又要兼顧立竿見影,建議選擇有長(zhǎng)期服務(wù)能力、意愿和心態(tài)的廠商長(zhǎng)期合作,能從產(chǎn)品、技術(shù)、咨詢、實(shí)施等提供全方面的長(zhǎng)期支持。
ü工具破冰,服務(wù)壓軸:“工若善其事,必先利其器”,作為這么復(fù)雜的系統(tǒng)性工程,沒有工具的支撐開展數(shù)據(jù)治理工作是不可想象的,引入業(yè)界合適的數(shù)據(jù)治理工具來啟動(dòng)這次破冰之旅是必須的。然而,數(shù)據(jù)治理工具的選用和部署只是萬(wàn)里長(zhǎng)征的第一步,數(shù)據(jù)治理項(xiàng)目最大的工作量不在于工具的安裝部署,這是很簡(jiǎn)單的工作,工具的選用不是決定性的關(guān)鍵成功要素,因?yàn)榭紤]到很多數(shù)據(jù)治理工作的落地要依靠各源頭系統(tǒng)的系統(tǒng)改造和安排業(yè)務(wù)人員大規(guī)模做源頭業(yè)務(wù)數(shù)據(jù)重新采集、更新錄入等大量工作,所以數(shù)據(jù)治理的成功關(guān)鍵在于有效協(xié)調(diào)企業(yè)內(nèi)外各相關(guān)方的資源,把數(shù)據(jù)治理工作和業(yè)務(wù)經(jīng)營(yíng)和信息科技各系統(tǒng)的需求、建設(shè)和運(yùn)維工作各環(huán)節(jié)有效銜接,這些都是要靠針對(duì)性的解決方案服務(wù)來完成的。因此在合作廠商的選擇上,建議不要過于聚焦現(xiàn)有工具平臺(tái)產(chǎn)品的硬對(duì)比,要重點(diǎn)聚焦在未來1-3年的服務(wù)軟實(shí)力比較上,在企業(yè)利益的角度,企業(yè)要的是端對(duì)端的軟服務(wù),而不是生搬硬套拿來讓企業(yè)削足適履的硬產(chǎn)品。
ü主流產(chǎn)品,專家定制:當(dāng)前業(yè)界主流的數(shù)據(jù)治理工具產(chǎn)品功能性能上各有千秋,而通用的功能和技術(shù)能力都是具備的,建議只需考慮在業(yè)界主流產(chǎn)品里面選擇工具產(chǎn)品即可,當(dāng)然也要注意考察了解該工具產(chǎn)品的同業(yè)應(yīng)用案例,對(duì)于業(yè)界一些只在個(gè)別同業(yè)實(shí)施過的所謂工具產(chǎn)品建議選擇要慎重,因?yàn)檫@樣的工具是非常定制化的,很可能是源自一個(gè)定制化開發(fā)項(xiàng)目的成果,這樣的工具離市場(chǎng)上主流的商品化產(chǎn)品在開放性、通用性、可擴(kuò)展性、產(chǎn)品質(zhì)量、售后保障等方面能力有天壤之別,往往離開了其定制開發(fā)的業(yè)主環(huán)境就水土不服了,畢竟每個(gè)企業(yè)的信息系統(tǒng)架構(gòu)和數(shù)據(jù)資源的差異性是很大的,通用的產(chǎn)品畢竟能滿足業(yè)界的主流共性要求,考慮到我國(guó)企業(yè)常見的相對(duì)薄弱的科技力量,隨大流不失為是一種明智的自我保護(hù)。而站在實(shí)施方面,畢竟企業(yè)當(dāng)前的信息科技應(yīng)用系統(tǒng)來自多個(gè)不同廠商,數(shù)據(jù)治理工作需要各系統(tǒng)配合的過程中,需要本項(xiàng)目實(shí)施團(tuán)隊(duì)在企業(yè)方和各系統(tǒng)實(shí)施項(xiàng)目團(tuán)隊(duì)面前有較高的專業(yè)權(quán)威性,能平衡各方利益,提出各方都能心悅誠(chéng)服的解決思路(可能不僅僅是數(shù)據(jù)架構(gòu)和數(shù)據(jù)治理領(lǐng)域的),推動(dòng)各方達(dá)成共識(shí)形成合力,在治理工作落地過程中能有效調(diào)動(dòng)并監(jiān)控各系統(tǒng)和各業(yè)務(wù)條線資源對(duì)于系統(tǒng)改造和數(shù)據(jù)更新工作的進(jìn)程和成果質(zhì)量。因此,企業(yè)必須高度關(guān)注實(shí)施方的專家資源投入,判斷這些專家人選的相關(guān)經(jīng)驗(yàn)、知識(shí)面、溝通技巧和綜合素質(zhì)能否被本行及各系統(tǒng)項(xiàng)目團(tuán)隊(duì)廣泛接受。
ü問題導(dǎo)入,全局把握:企業(yè)數(shù)據(jù)質(zhì)量問題冰凍三尺非一日之寒,積重難返,徹底解決是需要投入大量的時(shí)間和資源的。而數(shù)據(jù)治理工作先解決具體的數(shù)據(jù)質(zhì)量問題,先治標(biāo)后治本是對(duì)企業(yè)現(xiàn)實(shí)要求的折衷,因此在后續(xù)開展數(shù)據(jù)治理工作中必須堅(jiān)持問題導(dǎo)入,每一步工作都要明確具體解決了什么樣的問題,能體現(xiàn)怎樣的業(yè)務(wù)效益,用實(shí)際效果檢驗(yàn)工作成效,這樣才能爭(zhēng)取更多的資源和時(shí)間開展下一步的工作,建立更加良性的循環(huán)。而另外一方面,企業(yè)不能只顧低頭解決一些具體的數(shù)據(jù)質(zhì)量問題,而忽略了數(shù)據(jù)治理體系的長(zhǎng)期建設(shè)路徑。從總體架構(gòu)的角度,產(chǎn)生數(shù)據(jù)質(zhì)量問題結(jié)果的原因很多,如果我們只看后果而忽略了原因,則數(shù)據(jù)質(zhì)量問題并不可能得到徹底的根治,因此,從治本的角度,我們必須在IT戰(zhàn)略和總體架構(gòu)管控的高度,從總體架構(gòu)把握數(shù)據(jù)治理的各項(xiàng)決策,確保不偏離企業(yè)的戰(zhàn)略方向要求。
數(shù)據(jù)治理對(duì)任何一個(gè)企業(yè)都是一項(xiàng)牽一發(fā)而動(dòng)全身的重大而艱巨的工程,萬(wàn)丈高樓平地起,可是萬(wàn)丈高樓的建設(shè)不可能在沒有圖紙的情況下走一步看一步,從這個(gè)層面來說,我認(rèn)為首先做好充分的頂層設(shè)計(jì)才是確保成功的關(guān)鍵性第一步。