談韻
摘 要 數(shù)據(jù)治理是指從使用零散數(shù)據(jù)變?yōu)槭褂媒y(tǒng)一主數(shù)據(jù)、從具有很少或沒有組織和流程治理到企業(yè)范圍內(nèi)的綜合治理。它是一種關(guān)注于信息系統(tǒng)執(zhí)行層面的體系,本文是國家電網(wǎng)合肥供電公司通過在營銷系統(tǒng)、用電信息采集數(shù)據(jù)的相關(guān)大數(shù)據(jù)應(yīng)用業(yè)務(wù)探索和嘗試,在大數(shù)據(jù)基礎(chǔ)數(shù)據(jù)治理上的研究不斷加深,形成了自己的工作體系。
【關(guān)鍵詞】電網(wǎng) 電力大數(shù)據(jù) 治理 大數(shù)據(jù)管理
1 引言
2013年至2014年,國網(wǎng)公司信通部就逐步開展大數(shù)據(jù)研究與應(yīng)用推進(jìn)工作,完成編制《大數(shù)據(jù)應(yīng)用研究報(bào)告》、《公司大數(shù)據(jù)典型應(yīng)用需求分析報(bào)告》,組織中國電科院、南瑞集團(tuán)等完成省公司大數(shù)據(jù)平臺(tái)總體設(shè)計(jì),編制形成《公司大數(shù)據(jù)應(yīng)用指導(dǎo)意見》。2015年正式啟動(dòng)大數(shù)據(jù)平臺(tái)建設(shè)、應(yīng)用試點(diǎn)工作。
目前,國網(wǎng)公司范圍內(nèi)各單位陸續(xù)開展了一系列大數(shù)據(jù)的研究試點(diǎn)工作,但大多是集中于大數(shù)據(jù)平臺(tái)的技術(shù)研究實(shí)現(xiàn),在應(yīng)用方面多數(shù)是基于營銷系統(tǒng)、用電信息采集數(shù)據(jù)的相關(guān)應(yīng)用業(yè)務(wù)探索和嘗試,而在大數(shù)據(jù)應(yīng)用機(jī)制以及基礎(chǔ)數(shù)據(jù)治理上開展的研究工作較少。在進(jìn)行數(shù)據(jù)綜合應(yīng)用和智能分析的過程中,發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題從表象看是數(shù)據(jù)不完整、數(shù)據(jù)質(zhì)量差,但從深層次看是欠數(shù)據(jù)標(biāo)準(zhǔn)、缺數(shù)據(jù)管理職責(zé)、無數(shù)據(jù)考核機(jī)制等等。
2 數(shù)據(jù)治理的發(fā)展
上世紀(jì)九十年代以前,國外企業(yè)在數(shù)據(jù)治理方面也存在很多問題,IBM和摩托羅拉就是典型代表。
1992年之前,IBM在數(shù)據(jù)治理方面存在很多問題,沒有明確的可依賴的數(shù)據(jù)源,沒有明確的數(shù)據(jù)所有人,數(shù)據(jù)質(zhì)量差。1995年,IBM梳理并制定了業(yè)務(wù)數(shù)據(jù)標(biāo)準(zhǔn),定義了15大類業(yè)務(wù)標(biāo)準(zhǔn)、79個(gè)分類子業(yè)務(wù)標(biāo)準(zhǔn),這樣全公司看到的是一個(gè)統(tǒng)一的業(yè)務(wù)定義;2004年,IBM制定了數(shù)據(jù)責(zé)任人體系,并聯(lián)合業(yè)界多家公司和學(xué)術(shù)研究機(jī)構(gòu),成立了數(shù)據(jù)治理論壇,制定包括四大領(lǐng)域11個(gè)要素的數(shù)據(jù)治理框架和方法,來指導(dǎo)數(shù)據(jù)治理工作的開展。2005年成立了數(shù)據(jù)治理委員會(huì),之后又成立數(shù)據(jù)審核委員會(huì)。通過數(shù)據(jù)治理,IBM簡化了基礎(chǔ)架構(gòu),并降低了管理的復(fù)雜度。
同樣在上世紀(jì)末,摩托羅拉提出了六西格瑪管理策略,包含定義、測(cè)量、分析、改進(jìn)、控制的DMAIC流程,初期用于解決產(chǎn)品/服務(wù)質(zhì)量問題,后來也在解決數(shù)據(jù)質(zhì)量方面得到很好的應(yīng)用。
近幾年,IBM開展大數(shù)據(jù)治理研究,提出了18步大數(shù)據(jù)治理統(tǒng)一流程模型,并應(yīng)用于電信、零售、金融和公共交通等行業(yè)。
2014年,中國出現(xiàn)了專門的數(shù)據(jù)治理研究組織ITSS WG1,并向ISO正式提交和發(fā)布了數(shù)據(jù)治理研究白皮書。
目前,國內(nèi)電力行業(yè)開展的數(shù)據(jù)治理工作主要包含兩大類,一類是處理現(xiàn)有業(yè)務(wù)環(huán)節(jié)的數(shù)據(jù)質(zhì)量問題,如營銷稽查;另一類是針對(duì)業(yè)務(wù)主題應(yīng)用的數(shù)據(jù)治理,如營配貫通、運(yùn)檢中心的數(shù)據(jù)質(zhì)量評(píng)價(jià)。目前的數(shù)據(jù)治理工作沒有形成體系,缺少統(tǒng)一的標(biāo)準(zhǔn)、組織架構(gòu)、管理考核機(jī)制,難以持續(xù)有效開展。
隨著對(duì)數(shù)據(jù)資產(chǎn)認(rèn)識(shí)的不斷清晰,電力行業(yè)數(shù)據(jù)治理的目標(biāo)也在發(fā)生轉(zhuǎn)變,國家電科院也已經(jīng)開始著手?jǐn)?shù)據(jù)治理體系的研究,但暫未涉及包含數(shù)據(jù)、應(yīng)用、技術(shù)和管理的數(shù)據(jù)治理體系建設(shè)和應(yīng)用。
3 電力大數(shù)據(jù)治理方法論
國網(wǎng)合肥供電公司在此背景下,制定深化大數(shù)據(jù)應(yīng)用工作方案,以市縣公司實(shí)體業(yè)務(wù)為切入點(diǎn),推進(jìn)大數(shù)據(jù)應(yīng)用方法在供電企業(yè)應(yīng)用實(shí)踐,打造大數(shù)據(jù)應(yīng)用環(huán)境,同時(shí)從以下幾個(gè)方面定義合肥供電公司數(shù)據(jù)治理的方法論:
(1)理解數(shù)據(jù)治理的職能;
(2)把握數(shù)據(jù)治理的核心;
(3)明確數(shù)據(jù)治理的目標(biāo)。
通過執(zhí)行數(shù)據(jù)治理,對(duì)電力企業(yè)數(shù)據(jù)的管理和利用進(jìn)行評(píng)估、指導(dǎo)和監(jiān)督,提供不斷創(chuàng)新的數(shù)據(jù)服務(wù),為企業(yè)創(chuàng)造價(jià)值。
4 電力大數(shù)據(jù)治理體系探索
國網(wǎng)合肥供電公司經(jīng)過不斷的在營銷系統(tǒng)、用電信息采集數(shù)據(jù)的相關(guān)應(yīng)用業(yè)務(wù)探索和嘗試,在大數(shù)據(jù)基礎(chǔ)數(shù)據(jù)治理上的研究也在不斷加深,電力大數(shù)據(jù)治理體系建立需要明確的工作至少包含以下幾點(diǎn):
(1)需要在哪些業(yè)務(wù)領(lǐng)域或應(yīng)用場(chǎng)景作出電力業(yè)務(wù)數(shù)據(jù)治理的決策;
(2)需要哪些角色的人,以及如何參與到?jīng)Q策過程中;
(3)明確、完善電力大數(shù)據(jù)治理的最終目標(biāo)。
4.1 數(shù)據(jù)治理原理研究
4.1.1 六西格瑪(Six Sigma,6σ)管理及其數(shù)據(jù)管理延伸
六西格瑪(Six Sigma,6σ)是一種能夠嚴(yán)格、集中和高效地改善企業(yè)流程管理質(zhì)量的實(shí)施原則和技術(shù),以”零缺陷”的完美商業(yè)追求,帶動(dòng)質(zhì)量成本的大幅度降低,最終實(shí)現(xiàn)財(cái)務(wù)成效的提升與企業(yè)競爭力的突破。實(shí)施步驟包括:定義、測(cè)量、分析、改進(jìn)、控制。
六西格瑪管理延伸到數(shù)據(jù)質(zhì)量管理方面,一般采用十步數(shù)據(jù)質(zhì)量管理方法。
(1)定義和商定問題、時(shí)機(jī)和目標(biāo),以指導(dǎo)整個(gè)數(shù)據(jù)質(zhì)量管理的工作;
(2)收集、匯總、分析有關(guān)形式和信息環(huán)境。設(shè)計(jì)捕獲和評(píng)估的方案;
(3)按照數(shù)據(jù)質(zhì)量維度對(duì)數(shù)據(jù)質(zhì)量進(jìn)行評(píng)估;
(4)使用各種技術(shù)評(píng)估劣質(zhì)數(shù)據(jù)對(duì)業(yè)務(wù)產(chǎn)生的影響;
(5)確定影響數(shù)據(jù)質(zhì)量的真實(shí)原因,并區(qū)分這些原因的影響的數(shù)據(jù)質(zhì)量的級(jí)別;
(6)最終確定行動(dòng)的建議,為數(shù)據(jù)質(zhì)量改善制定方案,包括數(shù)據(jù)級(jí)和組織級(jí)的;
(7)建立數(shù)據(jù)錯(cuò)誤預(yù)防方案,并改正當(dāng)前數(shù)據(jù)問題;
(8)通過改進(jìn)組織管理流程,最大限度控制由管理上的缺陷造成的數(shù)據(jù)質(zhì)量問題;
(9)對(duì)數(shù)據(jù)和管理實(shí)施監(jiān)控,維護(hù)已改善的效果;
(10)溝通貫穿管理始終,循環(huán)的評(píng)估組織管理流程,以確保數(shù)據(jù)質(zhì)量改善的成果得到有效保持。
依據(jù)六西格瑪(Six Sigma,6σ)管理的原則和技術(shù),借鑒十步數(shù)據(jù)質(zhì)量管理方法,以業(yè)務(wù)驅(qū)動(dòng),用數(shù)據(jù)說話,進(jìn)行數(shù)據(jù)治理體系的研究和典型實(shí)踐,開展長效數(shù)據(jù)治理工作,為業(yè)務(wù)應(yīng)用和決策分析提供優(yōu)質(zhì)數(shù)據(jù)。
4.2 數(shù)據(jù)治理關(guān)鍵點(diǎn)研究
4.2.1 識(shí)別數(shù)據(jù)質(zhì)量關(guān)鍵要素
依據(jù)特定的業(yè)務(wù)需求或完整的業(yè)務(wù)場(chǎng)景,明確需要進(jìn)行數(shù)據(jù)治理的關(guān)鍵要素。數(shù)據(jù)要素的涉及范圍廣,業(yè)務(wù)邏輯復(fù)雜,同時(shí)也就牽涉到的數(shù)據(jù)內(nèi)容較多。
以供電公司統(tǒng)推PMS系統(tǒng)、營銷MIS系統(tǒng)為例,其中數(shù)據(jù)質(zhì)量關(guān)鍵要素包括電網(wǎng)設(shè)備臺(tái)帳和參數(shù):營銷系統(tǒng)中的用戶檔案、計(jì)量臺(tái)帳和臺(tái)戶關(guān)系,電能量采集系統(tǒng)中開關(guān)臺(tái)帳和電量數(shù)據(jù),調(diào)度技術(shù)支持系統(tǒng)中負(fù)荷數(shù)據(jù)、電網(wǎng)電壓、停電等運(yùn)行數(shù)據(jù),用電信息采集系統(tǒng)中負(fù)荷、電量和停電等運(yùn)行數(shù)據(jù)。例如PMS系統(tǒng)中線路設(shè)備的編號(hào)、名稱、電壓等級(jí)、所屬變電站、運(yùn)維單位、運(yùn)行狀態(tài)等信息,調(diào)度技術(shù)支持系統(tǒng)中線路的電流、電壓、有功功率、無功功率、功率因素、運(yùn)行狀態(tài)、狀態(tài)切換等數(shù)據(jù)。
4.2.2 數(shù)據(jù)標(biāo)準(zhǔn)的制訂
制訂數(shù)據(jù)標(biāo)準(zhǔn)是一個(gè)非常系統(tǒng)和復(fù)雜的工作,但它是開展數(shù)據(jù)治理工作的基礎(chǔ)。根據(jù)數(shù)據(jù)質(zhì)量定義,制定數(shù)據(jù)度量規(guī)則,包括完整性、唯一性、一致性、精確性、合法性、及時(shí)性等,這是一個(gè)反復(fù)迭代的過程,度量規(guī)則需要進(jìn)行實(shí)踐驗(yàn)證并不斷補(bǔ)充和完善,這是開展數(shù)據(jù)質(zhì)量度量的關(guān)鍵。
4.3 數(shù)據(jù)治理管理責(zé)任研究
國網(wǎng)合肥供電公司在大數(shù)據(jù)應(yīng)用項(xiàng)目中,經(jīng)過不斷的摸索,梳理出關(guān)鍵性基礎(chǔ)數(shù)據(jù)的責(zé)任分解,大致如圖1。
4.4 數(shù)據(jù)治理考核研究
(1)設(shè)立數(shù)據(jù)治理組織機(jī)構(gòu),明確工作權(quán)責(zé),建立部門間管理協(xié)同和業(yè)務(wù)統(tǒng)籌協(xié)調(diào)機(jī)制,推動(dòng)數(shù)據(jù)治理工作長效開展。
(2)制訂數(shù)據(jù)治理考核制度,明確考核指標(biāo)、考核周期、考核范圍、考核標(biāo)準(zhǔn)等,落實(shí)數(shù)據(jù)認(rèn)責(zé),以績效考核的方式促進(jìn)數(shù)據(jù)質(zhì)量的提升。
5 總結(jié)
供電公司已經(jīng)進(jìn)入大數(shù)據(jù)時(shí)代,數(shù)據(jù)治理面臨著多重問題,因此,合肥供電公司不斷在大數(shù)據(jù)應(yīng)用過程中加強(qiáng)數(shù)據(jù)文化意識(shí),推行數(shù)據(jù)治企的理念。摸索建立數(shù)據(jù)治理組織機(jī)構(gòu)、培養(yǎng)大數(shù)據(jù)人才、學(xué)習(xí)大數(shù)據(jù)質(zhì)量治理技術(shù)、制訂數(shù)據(jù)標(biāo)準(zhǔn),同時(shí)加強(qiáng)數(shù)據(jù)安全,保護(hù)供電公司個(gè)人隱私,建立數(shù)據(jù)責(zé)任人認(rèn)責(zé)體系。最后,持續(xù)不斷進(jìn)行質(zhì)量改進(jìn),為合肥公司電力大數(shù)據(jù)應(yīng)用提供堅(jiān)實(shí)的高價(jià)值數(shù)據(jù)基礎(chǔ)。
參考文獻(xiàn)
[1]涂子沛.大數(shù)據(jù):正在到來的數(shù)據(jù)革命[M].桂林:廣西師范大學(xué)出版社,2012.
[2]維克托·邁爾—舍恩伯格,肯尼斯·庫克耶·大數(shù)據(jù)時(shí)代[M].杭州:浙江人民出版社,2013.
[3]陳潭.大數(shù)據(jù)時(shí)代的國家治理[M].北京:中國社會(huì)科學(xué)出版社,2015.