張春燕 王國玲
(中海油信息科技有限公司信息技術(shù)分公司 天津 300450)
當(dāng)前,隨著世界經(jīng)濟(jì)全球化不斷地走深走實(shí),國內(nèi)各類企業(yè)在市場上面臨越來越激烈的競爭,不論是國內(nèi)市場還是國外市場,國內(nèi)企業(yè)均面臨來自多方面的機(jī)遇與挑戰(zhàn)。所以,當(dāng)前企業(yè)增強(qiáng)互聯(lián)網(wǎng)意識(shí)和信息化基礎(chǔ)建設(shè)顯得非常重要。根據(jù)已有的信息統(tǒng)計(jì),在過去的很長一段時(shí)間內(nèi),全球企業(yè)在信息化建設(shè)上投入了大量的資金和技術(shù)支持。為了保護(hù)企業(yè)內(nèi)部的機(jī)密、結(jié)構(gòu)與穩(wěn)定性,各種國內(nèi)企業(yè)建立了各自的專屬信息化技術(shù)管理系統(tǒng),幫助企業(yè)提高生產(chǎn)效率,創(chuàng)造更大的效益和價(jià)值。本文正是在此大背景下,介紹企業(yè)數(shù)據(jù)管理的現(xiàn)狀,介紹企業(yè)主數(shù)據(jù)管理系統(tǒng)的架構(gòu),分析企業(yè)實(shí)現(xiàn)主數(shù)據(jù)管理的方法,總結(jié)相關(guān)經(jīng)驗(yàn),為后續(xù)企業(yè)數(shù)據(jù)管理提供參考價(jià)值。
在當(dāng)前已有的國內(nèi)優(yōu)秀企業(yè)當(dāng)中,尤其是國有企業(yè)、大型的私有企業(yè)等,其已經(jīng)跟上了時(shí)代的步伐,形成了一些比較先進(jìn)的管理經(jīng)驗(yàn),建設(shè)了屬于本企業(yè)的信息化管理技術(shù)。在企業(yè)信息化管理當(dāng)中,普遍存在多個(gè)不同的企業(yè)數(shù)據(jù)管理系統(tǒng)。這些管理系統(tǒng)在每日的數(shù)據(jù)處理當(dāng)中會(huì)產(chǎn)生龐大的數(shù)據(jù)庫,因此,需要專人對其進(jìn)行管理,來應(yīng)對企業(yè)大數(shù)據(jù)體量下的運(yùn)行與發(fā)展。已有的企業(yè)數(shù)據(jù),不僅包括滿足企業(yè)基礎(chǔ)運(yùn)行的云數(shù)據(jù),也包括過去企業(yè)發(fā)展當(dāng)中保留的歷史遺留數(shù)據(jù)。歷史遺留數(shù)據(jù)是不需要后續(xù)繼續(xù)使用的,因此,在發(fā)展過程中可以定期對其進(jìn)行清除。若從數(shù)據(jù)的共享性與變化的角度來看,也可以把數(shù)據(jù)分為交流數(shù)據(jù)與主流數(shù)據(jù),這兩種數(shù)據(jù)從時(shí)間的角度上看,都屬于主數(shù)據(jù),也可稱之為當(dāng)前數(shù)據(jù)。在實(shí)際的管理中,企業(yè)的信息技術(shù)管理人員需要將不同的數(shù)據(jù),采用不同的辦法,對其進(jìn)行處理與分類,這也是一種高效的數(shù)據(jù)管理方式[1]。
目前來看,企業(yè)的數(shù)據(jù)可以分為正在運(yùn)行當(dāng)中的主流數(shù)據(jù)和出現(xiàn)故障亟需維修的備用數(shù)據(jù)。這兩種數(shù)據(jù)在運(yùn)行過程中,其數(shù)量會(huì)發(fā)生轉(zhuǎn)化,換言之,主流數(shù)據(jù)可能會(huì)轉(zhuǎn)化成備用數(shù)據(jù),而備用數(shù)據(jù)經(jīng)過維修后也可轉(zhuǎn)化成為主流數(shù)據(jù)。現(xiàn)今,在“互聯(lián)網(wǎng)+”時(shí)代,國內(nèi)大多數(shù)企業(yè)還沒有形成全面、系統(tǒng)的主流數(shù)據(jù)管理模式,很多管理經(jīng)驗(yàn)還借鑒于國外的優(yōu)秀企業(yè)。企業(yè)內(nèi)部分主流數(shù)據(jù)往往并沒有整合在一起,大多分布在企業(yè)內(nèi)多個(gè)不同的業(yè)務(wù)系統(tǒng)當(dāng)中。而不同的業(yè)務(wù)系統(tǒng)有其各自的基本發(fā)展模式,有些管理辦法在系統(tǒng)內(nèi)并不適用,所以目前來看,亟須形成一種完善的企業(yè)數(shù)據(jù)管理模式。
當(dāng)前,國內(nèi)主流企業(yè)主要有以下兩種管理內(nèi)部數(shù)據(jù)的方式。
第一種是分散式管理。在此管理模式中,企業(yè)內(nèi)的各個(gè)信息系統(tǒng)的關(guān)聯(lián)應(yīng)用會(huì)歸屬于各自不同的管理渠道,也就是所謂的各司其職管理方式。但是這種管理方式存在一個(gè)弊端,那就是信息調(diào)用比較困難。如果企業(yè)要想調(diào)用相關(guān)聯(lián)系統(tǒng)中的數(shù)據(jù),或者是把其他數(shù)據(jù)進(jìn)行整合來滿足關(guān)聯(lián)系統(tǒng)使用,則需要采取比較繁瑣的方式進(jìn)行調(diào)用。例如,企業(yè)內(nèi)人力資源池需管理客戶關(guān)系,必然要建立企業(yè)與客戶、企業(yè)內(nèi)部員工等多種人員關(guān)系的管理方式[2]。然而,這些系統(tǒng)應(yīng)用數(shù)據(jù)可能歸屬各個(gè)不同的部門,人力資源部門往往對其難以把握。因此,企業(yè)可以考慮在人力資源總系統(tǒng)中建立多種人員關(guān)系的管理模式,或者放開管理權(quán)限,讓人力資源部門的工作人員參與管理,這樣也可以使管理的效率得到提升,并且提高管理質(zhì)量。所以,企業(yè)總的管理方式必然不是分散的,而是最終要匯聚在一起的,這才是未來企業(yè)管理的大方向。
第二種管理方式就是現(xiàn)在比較常見的統(tǒng)一數(shù)據(jù)管理模式。企業(yè)根據(jù)各種不同的管理辦法,將各個(gè)部門所管理的第一手?jǐn)?shù)據(jù)進(jìn)行處理與分析,然后統(tǒng)一歸整到企業(yè)最終的總數(shù)據(jù)庫中,在總數(shù)據(jù)庫中統(tǒng)籌進(jìn)行調(diào)用、管理、運(yùn)行,而權(quán)限歸屬于企業(yè)的主要領(lǐng)導(dǎo)人員所有。這種數(shù)據(jù)庫的問題在于數(shù)據(jù)體量龐大,后期不便于維護(hù),若數(shù)據(jù)庫在運(yùn)行中出現(xiàn)數(shù)據(jù)的錯(cuò)誤或遺失,則會(huì)影響其他數(shù)據(jù)的使用,造成數(shù)據(jù)的“多米諾骨牌”效應(yīng)。但是仍然不可否認(rèn),這種管理模式具有其他管理模式所沒有的優(yōu)點(diǎn),它不僅具有比較強(qiáng)的安全性,便于維護(hù),也可以從已有的管理系統(tǒng)當(dāng)中較快且全面地進(jìn)行調(diào)用。例如,如果某數(shù)據(jù)出現(xiàn)了異常,需要停止數(shù)據(jù)庫運(yùn)行進(jìn)行維護(hù),則中央處理器可以考慮將主數(shù)據(jù)管理系統(tǒng)的問題提前告知各個(gè)子系統(tǒng),各個(gè)子系統(tǒng)則會(huì)停止運(yùn)行,待主系統(tǒng)的問題處理完畢后,再進(jìn)行運(yùn)行,這樣極大地提高了數(shù)據(jù)的處理與信息的使用效率,從而能夠?qū)崿F(xiàn)主數(shù)據(jù)的管理與維修一體化,維護(hù)了企業(yè)的數(shù)據(jù)安全,提高了主數(shù)據(jù)的運(yùn)行效率[3]。
眾所周知,當(dāng)前已有的主數(shù)據(jù)管理系統(tǒng)模型設(shè)計(jì)可以滿足當(dāng)前企業(yè)大多數(shù)基本需求。根據(jù)目前已有的主流設(shè)計(jì)方案可以發(fā)現(xiàn),能夠滿足系統(tǒng)總體架構(gòu)的設(shè)計(jì)是基于中間渠道的主體架構(gòu)。中間渠道承擔(dān)主要的信息交換之責(zé),在實(shí)際的數(shù)據(jù)處理過程中,主要承擔(dān)起數(shù)據(jù)交換、信息加工及數(shù)據(jù)庫基本運(yùn)行的工作。由此,企業(yè)的信息技術(shù)管理人員經(jīng)過多方比較,形成了企業(yè)的主數(shù)據(jù)管理系統(tǒng)。而主數(shù)據(jù)管理系統(tǒng)也可以說是信息交流中間渠道的載體,上述辦法把信息交流與信息加工結(jié)合起來,完全凸顯中間渠道的作用,做到了信息交流主流系統(tǒng)與總數(shù)據(jù)庫相結(jié)合[4]。另外,這一方法賦予了主數(shù)據(jù)庫更大的容量與處理水平。從以上企業(yè)主數(shù)據(jù)管理系統(tǒng)的基本結(jié)構(gòu)中可以發(fā)現(xiàn),企業(yè)基本管理系統(tǒng)主要包括信息交流基本適配器、基本適配器的管控與處理、主數(shù)據(jù)的基本管理、系統(tǒng)應(yīng)用的基本管理。在此基礎(chǔ)上,管理系統(tǒng)保證各類數(shù)據(jù)進(jìn)行交換,建立適配器的運(yùn)行交換環(huán)境,形成交換空間。企業(yè)主數(shù)據(jù)管理系統(tǒng)要在中間渠道交流的基礎(chǔ)上進(jìn)行信息交換,且要符合企業(yè)主數(shù)據(jù)庫的基本要求。綜上所述,企業(yè)主數(shù)據(jù)管理系統(tǒng)最主要的是中間渠道操作平臺(tái),其次是數(shù)據(jù)交換環(huán)境。在已有的數(shù)據(jù)交換環(huán)境中,最重要的內(nèi)容是適配器的基本運(yùn)行條件,換言之,企業(yè)要構(gòu)建符合適配器運(yùn)行的基本環(huán)境。在良好的環(huán)境下,主數(shù)據(jù)管理系統(tǒng)才能夠滿足輸入與輸出的良性轉(zhuǎn)換,將輸入數(shù)據(jù)按照已有的要求轉(zhuǎn)換成輸出數(shù)據(jù),提高數(shù)據(jù)處理的效率。如果數(shù)據(jù)處理處于良性運(yùn)行,那么數(shù)據(jù)的監(jiān)控與管理則變得更加高效,它將為系統(tǒng)提供全方位、多角度、高質(zhì)量的管理,為系統(tǒng)的安全、穩(wěn)定運(yùn)行提供保障。
從已有的數(shù)據(jù)交流方式中可以發(fā)現(xiàn),主數(shù)據(jù)管理系統(tǒng)的適配器在主數(shù)據(jù)管理系統(tǒng)結(jié)構(gòu)中起著非常關(guān)鍵的作用,可以說,大部分主數(shù)據(jù)的處理與分析需要借助主數(shù)據(jù)的適配器的合理運(yùn)行。所以,要構(gòu)建良好的數(shù)據(jù)適配器工作環(huán)境,把完善適配環(huán)境當(dāng)成建立主數(shù)據(jù)管理系統(tǒng)的重點(diǎn)工作。在企業(yè)的信息數(shù)據(jù)管理系統(tǒng)中,需要大量的主數(shù)據(jù)相互變換與轉(zhuǎn)化,轉(zhuǎn)化需要建立符合各自數(shù)據(jù)體量的適配器來滿足適配合理運(yùn)行。在此背景下,通過向多種渠道借鑒學(xué)習(xí),吸取了常見的流水線作業(yè)管理經(jīng)驗(yàn),以提高數(shù)據(jù)庫管理的效率。由于不同的數(shù)據(jù)適配器所需要轉(zhuǎn)化的數(shù)據(jù)類型和數(shù)據(jù)基本格式存在差異,因此,需要對已有的數(shù)據(jù)適配器進(jìn)行一定的加工與處理,使各種數(shù)據(jù)適配器能夠較快地處理各自已有的數(shù)據(jù)。因此,可以嘗試在系統(tǒng)定義的基礎(chǔ)數(shù)據(jù)庫中,找到相應(yīng)的基本適配器,再根據(jù)已有的需求合理加工,最終在系統(tǒng)中創(chuàng)造出符合實(shí)際情況的數(shù)據(jù)適配器[5]。這樣不僅可以保證適配器的基本工作要求,也可以使適配器更符合實(shí)際需求,提高數(shù)據(jù)處理的工作效率。
為了發(fā)揮主數(shù)據(jù)管理系統(tǒng)的功能,應(yīng)該先將各個(gè)不同的關(guān)聯(lián)系統(tǒng)整合起來,充分實(shí)現(xiàn)各個(gè)不同的子系統(tǒng)與關(guān)鍵數(shù)據(jù)的相互聯(lián)系。當(dāng)前,數(shù)據(jù)管理系統(tǒng)主要采用兩種不同的解決方案來實(shí)現(xiàn)既定目標(biāo):一是基于ETL 工具的方式來實(shí)現(xiàn);二是基于SOA 的基本體系架構(gòu)來實(shí)現(xiàn)。
對于第一種方式,ETL 工具的實(shí)現(xiàn)途徑常用ETL工具本身,其具有數(shù)據(jù)捕捉與數(shù)據(jù)轉(zhuǎn)化的能力,通常使用它來實(shí)現(xiàn)MDM系統(tǒng)中異構(gòu)系統(tǒng)的數(shù)據(jù)關(guān)聯(lián)、整合與排列。目前,很多相關(guān)的廠商都推出了自己的數(shù)據(jù)系統(tǒng),它們均是基于ETL 來解決數(shù)據(jù)管理的問題。當(dāng)其中的一個(gè)數(shù)據(jù)系統(tǒng)發(fā)生變化時(shí),其關(guān)聯(lián)的部位就會(huì)捕捉到相關(guān)的變化,進(jìn)而把這種變化傳遞到主數(shù)據(jù)管理系統(tǒng)中去,改變主數(shù)據(jù)管理系統(tǒng)中的數(shù)值。ETL 工具會(huì)根據(jù)這種轉(zhuǎn)變清除過去的歷史記錄,從而形成新的重組數(shù)據(jù)。同時(shí),系統(tǒng)也會(huì)將不同的數(shù)據(jù)分發(fā)給相關(guān)聯(lián)的業(yè)務(wù)系統(tǒng),由業(yè)務(wù)相關(guān)的業(yè)務(wù)系統(tǒng)進(jìn)行審批。在后續(xù)的設(shè)計(jì)中,可以考慮把ETL 系統(tǒng)加入相關(guān)的流程引擎,可以提前布局流程的系統(tǒng)設(shè)計(jì),使得不同的流程實(shí)現(xiàn)前后切換?;贓TL系統(tǒng)的設(shè)計(jì)的優(yōu)點(diǎn)是工作時(shí)效高,而缺點(diǎn)是工作選擇的途徑較為單一,且受到網(wǎng)絡(luò)影響的程度較大。
第二種方法是基于SOA 架構(gòu)的主數(shù)據(jù)管理系統(tǒng),這種方法主要采用web service來實(shí)現(xiàn)不同的系統(tǒng)互聯(lián)互通,這種系統(tǒng)處理數(shù)據(jù)的方法主要是使用數(shù)據(jù)應(yīng)用和關(guān)聯(lián)適配器,通過不同類型的適配器,使得關(guān)聯(lián)數(shù)據(jù)推送消息。SOA 系統(tǒng)自帶監(jiān)控功能,可以實(shí)現(xiàn)對系統(tǒng)中的工作流引擎進(jìn)行監(jiān)控,并且能夠?qū)崟r(shí)控制主數(shù)據(jù)的全過程。另外,該系統(tǒng)的基本架構(gòu)是基于J2EE的架構(gòu),系統(tǒng)的方法將更加多樣化,拓展性也比較好。當(dāng)然,如果數(shù)據(jù)量較大,該系統(tǒng)的效率會(huì)降低。
當(dāng)企業(yè)主數(shù)據(jù)管理系統(tǒng)完工后,工作人員需要測試系統(tǒng)的運(yùn)行情況。根據(jù)已有的既定方案,企業(yè)內(nèi)部各個(gè)部門的應(yīng)用系統(tǒng)都是獨(dú)立運(yùn)行的,它們存儲(chǔ)的數(shù)據(jù)都具有唯一性,并由專門管理的人員進(jìn)行管理。例如,在企業(yè)人力資源部門中,部門會(huì)派專門的人員輸入或輸出數(shù)據(jù),也包括后期數(shù)據(jù)安全管理與數(shù)據(jù)運(yùn)行維護(hù)。但是,企業(yè)其他部門也存在不同的客戶關(guān)系,需要其他部門內(nèi)相應(yīng)的管理人員對其進(jìn)行數(shù)據(jù)梳理,這也就是所謂的“專人專職”管理模式。雖然系統(tǒng)內(nèi)管理的工作量略有增加,但管理質(zhì)量和安全性都得到了保證。在目前的數(shù)據(jù)管理信息系統(tǒng)中,相同的數(shù)據(jù)僅需在主流數(shù)據(jù)信息系統(tǒng)便可以實(shí)現(xiàn)數(shù)據(jù)處理與信息交換,可以通過中間渠道交換到其他的子數(shù)據(jù)系統(tǒng)中去,使數(shù)據(jù)交換具有非常高的靈活性。待企業(yè)的主信息管理系統(tǒng)實(shí)現(xiàn)后發(fā)現(xiàn),它大大提高了企業(yè)的數(shù)據(jù)管理效率與質(zhì)量。從量變和質(zhì)變兩個(gè)角度進(jìn)行統(tǒng)計(jì)與維護(hù)發(fā)現(xiàn),在實(shí)施主數(shù)據(jù)管理系統(tǒng)后,企業(yè)能夠更好地把控已有的業(yè)務(wù)伙伴、客戶關(guān)系、供應(yīng)鏈等,也能更容易地統(tǒng)計(jì)這些數(shù)據(jù)。從數(shù)據(jù)質(zhì)量的角度來看,主數(shù)據(jù)管理系統(tǒng)可以避免傳送錯(cuò)誤數(shù)據(jù),對于已有的錯(cuò)誤,數(shù)據(jù)會(huì)進(jìn)行自糾與系統(tǒng)管理,把已有錯(cuò)誤數(shù)據(jù)及時(shí)剔除,并更換為正確的數(shù)據(jù),提高了系統(tǒng)中數(shù)據(jù)庫數(shù)據(jù)的安全性與準(zhǔn)確性。
此外,數(shù)據(jù)的數(shù)量和質(zhì)量是存在關(guān)聯(lián)的。數(shù)據(jù)的數(shù)量降低,質(zhì)量必然會(huì)下降;數(shù)據(jù)的數(shù)量提高,質(zhì)量必然也會(huì)提高。在未來,主數(shù)據(jù)管理系統(tǒng)的數(shù)據(jù)處理報(bào)錯(cuò)數(shù)據(jù)將會(huì)越來越少,說明目前的主數(shù)據(jù)管理系統(tǒng)取得了非常好的成效。這使得關(guān)聯(lián)的數(shù)據(jù)在企業(yè)各個(gè)部門的子數(shù)據(jù)管理系統(tǒng)中也得到了比較充分的調(diào)用,提高了關(guān)聯(lián)數(shù)據(jù)的運(yùn)行效率,降低了部門間關(guān)聯(lián)性數(shù)據(jù)的錯(cuò)誤率,避免發(fā)生安全數(shù)據(jù)泄露等安全性問題。通過主數(shù)據(jù)管理系統(tǒng)的效果反饋發(fā)現(xiàn),在企業(yè)實(shí)施主數(shù)據(jù)管理系統(tǒng)后,企業(yè)在數(shù)據(jù)系統(tǒng)運(yùn)行效率、數(shù)據(jù)的自動(dòng)化管理、數(shù)據(jù)一體化、數(shù)據(jù)質(zhì)量與數(shù)量等方面取得了顯著提高,其數(shù)據(jù)處理的工作效率也大大提升,給企業(yè)平穩(wěn)運(yùn)行與盈利帶來了極大的改善。
現(xiàn)如今,世界經(jīng)濟(jì)全球化正在進(jìn)一步演變與發(fā)展,國內(nèi)的各種企業(yè)也在不斷改革與轉(zhuǎn)化。為了更好地滿足國內(nèi)企業(yè)的發(fā)展,我國需要提高企業(yè)主信息管理系統(tǒng)的應(yīng)用水平,并且進(jìn)一步深化企業(yè)主信息管理系統(tǒng)的程序調(diào)節(jié)、信息調(diào)用、子系統(tǒng)分配等問題。本文分析了企業(yè)主數(shù)據(jù)管理系統(tǒng)的發(fā)展現(xiàn)狀,在此基礎(chǔ)上,詳細(xì)劃分了企業(yè)主數(shù)據(jù)管理系統(tǒng)的基本架構(gòu),接著概述了企業(yè)主數(shù)據(jù)管理系統(tǒng)的實(shí)現(xiàn)途徑,主要包括基于ETL工具的實(shí)現(xiàn)方法與基于SOA體系架構(gòu)的實(shí)現(xiàn)方法。最后,對已有的企業(yè)主數(shù)據(jù)管理系統(tǒng)的實(shí)現(xiàn)效果進(jìn)行分析并發(fā)現(xiàn),當(dāng)前我國的企業(yè)主數(shù)據(jù)管理系統(tǒng)取得了顯著的進(jìn)步,在各個(gè)方面均有提高。隨著企業(yè)管理信息化的進(jìn)一步走深走實(shí),在未來,我國的企業(yè)主數(shù)據(jù)管理系統(tǒng)將會(huì)更加信息化、智能化與人性化。