魏曉晨 王振潮 王國(guó)新 黃際太
?
新時(shí)期大數(shù)據(jù)智能電網(wǎng)構(gòu)建研究
魏曉晨1王振潮1王國(guó)新1黃際太2
1.青島特銳德設(shè)計(jì)院有限公司,山東 青島 266000 2.山東世紀(jì)陽(yáng)光紙業(yè)集團(tuán)有限公司,山東 濰坊 261000
主要研究了大數(shù)據(jù)下的智能電網(wǎng)建設(shè)內(nèi)容。首先分析了大數(shù)據(jù)智能電網(wǎng),依照文獻(xiàn)內(nèi)容明確了大數(shù)據(jù)下的智能電網(wǎng)特征,然后在此基礎(chǔ)上對(duì)大數(shù)據(jù)下的智能電網(wǎng)建設(shè)內(nèi)容進(jìn)行了挖掘,從數(shù)據(jù)庫(kù)、算法、存貯及處理四項(xiàng)內(nèi)容著手,對(duì)智能電網(wǎng)構(gòu)建進(jìn)行了完善,對(duì)大數(shù)據(jù)下的智能電網(wǎng)發(fā)展具有一定的貢獻(xiàn)。
大數(shù)據(jù);智能電網(wǎng);特征
智能電網(wǎng)與傳統(tǒng)電網(wǎng)存在非常大的差異,數(shù)據(jù)內(nèi)容較為復(fù)雜,系統(tǒng)結(jié)構(gòu)較為龐大,處理難度較高,已經(jīng)成為電網(wǎng)建設(shè)中的核心部分[1]。智能電網(wǎng)中的智能是建立在大量數(shù)據(jù)基礎(chǔ)上的,具有明顯的大數(shù)據(jù)特征,其具體大數(shù)據(jù)內(nèi)容主要表現(xiàn)在以下幾方面。
第一,大量的設(shè)備數(shù)據(jù)。智能電網(wǎng)對(duì)設(shè)備信息具有較高的要求,需要及時(shí)掌握設(shè)備的實(shí)時(shí)信息,依照實(shí)時(shí)信息完成智能控制。
第二,大量的狀態(tài)數(shù)據(jù)。智能電網(wǎng)為了實(shí)現(xiàn)電網(wǎng)運(yùn)行狀態(tài)的捕捉,需要及時(shí)收集上述系統(tǒng)中的信息,系統(tǒng)采樣頻率較高。系統(tǒng)在上述狀況下可以獲得大量連續(xù)信息,信息能夠及時(shí)反映系統(tǒng)狀況,信息體系非常龐大。
第三,大量的細(xì)節(jié)數(shù)據(jù)。智能電網(wǎng)可以全面控制系統(tǒng)各個(gè)細(xì)節(jié),可以實(shí)現(xiàn)實(shí)時(shí)變化控制,并對(duì)系統(tǒng)細(xì)節(jié)進(jìn)行調(diào)整。
大數(shù)據(jù)智能電網(wǎng)具有典型的智能化數(shù)據(jù)特征,其具體表現(xiàn)為:
(1)具有非常大的數(shù)據(jù)量信息,其數(shù)據(jù)內(nèi)容量非常高,可以生產(chǎn)出幾十甚至幾百TB系統(tǒng)數(shù)據(jù)信息。
(2)內(nèi)容非常復(fù)雜,可以產(chǎn)生文本數(shù)據(jù)、歷史數(shù)據(jù)、多媒體數(shù)據(jù)等,以不同的數(shù)據(jù)信息完成高效信息交流,改善電網(wǎng)智能化效益。
(3)內(nèi)容數(shù)據(jù)價(jià)值密度較低,數(shù)據(jù)內(nèi)容實(shí)時(shí)獲取,信息密集度價(jià)高,可以全方面反映系統(tǒng)存在的問(wèn)題,數(shù)據(jù)信息準(zhǔn)確性較高。
(4)系統(tǒng)處理效率高,可以通過(guò)智能化系統(tǒng)完成數(shù)據(jù)的全面處理,以智能化技術(shù)手段對(duì)在線和離線數(shù)據(jù)進(jìn)行及時(shí)分析,數(shù)據(jù)利用效益非常高。
(5)數(shù)據(jù)質(zhì)量普遍較高,數(shù)據(jù)真實(shí)性可靠級(jí)別一般高于其他系統(tǒng)數(shù)據(jù)真實(shí)性,可以依照數(shù)據(jù)進(jìn)行準(zhǔn)確預(yù)測(cè),系統(tǒng)處理可靠性較為客觀。
作為數(shù)據(jù)庫(kù)的重要組成部分,并行數(shù)據(jù)庫(kù)直接影響著數(shù)據(jù)庫(kù)的關(guān)系結(jié)構(gòu),可以通過(guò)數(shù)據(jù)內(nèi)容形式轉(zhuǎn)變?yōu)橄到y(tǒng)提供高質(zhì)量、高效益的數(shù)據(jù)信息,對(duì)數(shù)據(jù)安全性和可靠性的提升具有非常好的促進(jìn)作用。
并行數(shù)據(jù)庫(kù)在建設(shè)的過(guò)程中要對(duì)關(guān)系數(shù)據(jù)庫(kù)進(jìn)行全面控制,要依照數(shù)據(jù)結(jié)構(gòu)狀況、分析狀況、存貯狀況等形成處理體系,提升數(shù)據(jù)安全性和可靠性。首先,智能電網(wǎng)并行數(shù)據(jù)庫(kù)構(gòu)建要設(shè)置好存貯結(jié)構(gòu),依照系統(tǒng)數(shù)據(jù)內(nèi)容對(duì)存貯層次進(jìn)行明確,從而保證數(shù)據(jù)能夠被及時(shí)、高效利用。其次,要完善數(shù)據(jù)查詢系統(tǒng),依照智能化技術(shù)明確數(shù)據(jù)查詢層次,將查詢內(nèi)容與數(shù)據(jù)庫(kù)層次橋接起來(lái),形成一一對(duì)應(yīng)結(jié)構(gòu)體系,保證數(shù)據(jù)能夠快速、準(zhǔn)確查詢及應(yīng)用。最后,要做好數(shù)據(jù)庫(kù)語(yǔ)言設(shè)置。當(dāng)前智能電網(wǎng)并行數(shù)據(jù)庫(kù)中可以選取SQL語(yǔ)言,使用Scale Out方式及RDBMS(Relational Database Management System,關(guān)系數(shù)據(jù)庫(kù)管理系統(tǒng))提升數(shù)據(jù)庫(kù)應(yīng)用性能。
我國(guó)云計(jì)算體系在大數(shù)據(jù)智能電網(wǎng)中應(yīng)用范圍較窄,一般多用于電力設(shè)備狀態(tài)監(jiān)測(cè)過(guò)程中。當(dāng)前云計(jì)算體系在運(yùn)用上述內(nèi)容時(shí)主要通過(guò)構(gòu)建電力系統(tǒng)仿真云計(jì)算中心實(shí)施各項(xiàng)工作,以基礎(chǔ)云、管理云、計(jì)算云三項(xiàng)內(nèi)容達(dá)到數(shù)據(jù)的仿真處理,對(duì)系統(tǒng)狀況進(jìn)行模擬和分析,其整體構(gòu)建內(nèi)容較為單一。
隨著大數(shù)據(jù)智能電網(wǎng)的不斷豐富和數(shù)據(jù)計(jì)算技術(shù)的不斷改善,強(qiáng)化云計(jì)算體系結(jié)構(gòu),形成新的云計(jì)算體系層次已經(jīng)勢(shì)在必行。智能電網(wǎng)云計(jì)算體系在構(gòu)建的過(guò)程中需要對(duì)數(shù)據(jù)存貯及數(shù)據(jù)并行內(nèi)容進(jìn)行合理設(shè)置,要依照智能化技術(shù)保證數(shù)據(jù)能有序處理,從而提升數(shù)據(jù)處理的有效性和合理性。智能電網(wǎng)云計(jì)算體系構(gòu)建時(shí)要做好對(duì)分布式文件系統(tǒng)的把握,要以該內(nèi)容為核心構(gòu)建理論進(jìn)行計(jì)算安排。體系要針對(duì)電網(wǎng)中的重要內(nèi)容,依照系統(tǒng)指標(biāo)狀況及系統(tǒng)運(yùn)行狀態(tài)實(shí)施對(duì)應(yīng)監(jiān)測(cè),從而獲取有效信息。在采集完成數(shù)據(jù)后,云計(jì)算體系要依照上述信息和Hadoop內(nèi)容,構(gòu)建對(duì)應(yīng)虛擬化技術(shù)體系及分布式冗余存貯體系,對(duì)數(shù)據(jù)進(jìn)行處理及存貯,從而實(shí)現(xiàn)智能電網(wǎng)大數(shù)據(jù)的全方位計(jì)算。
傳統(tǒng)電網(wǎng)數(shù)據(jù)內(nèi)容較少,系統(tǒng)對(duì)數(shù)據(jù)形勢(shì)要求較低,散亂數(shù)據(jù)對(duì)整體系統(tǒng)處理并沒(méi)有過(guò)多影響。但是在大數(shù)據(jù)智能電網(wǎng)中,電網(wǎng)內(nèi)容非常龐大,散亂數(shù)據(jù)可以直接造成數(shù)據(jù)擁堵,導(dǎo)致系統(tǒng)數(shù)據(jù)處理效益大打折扣。因此,在實(shí)施數(shù)據(jù)傳輸體系構(gòu)建的過(guò)程中大數(shù)據(jù)智能電網(wǎng)要最大限度壓縮電網(wǎng)中的各項(xiàng)數(shù)據(jù),將散亂形式數(shù)據(jù)內(nèi)容轉(zhuǎn)變?yōu)榧惺綌?shù)據(jù)包,以數(shù)據(jù)包代替原有數(shù)據(jù)散漫傳輸過(guò)程中可能出現(xiàn)的擁擠現(xiàn)象,改善數(shù)據(jù)傳輸效益。
隨著大數(shù)據(jù)智能電網(wǎng)建設(shè)的不斷深入,數(shù)據(jù)傳輸已經(jīng)得到了非常大的改善和提升,已經(jīng)開(kāi)始由單純數(shù)據(jù)壓縮轉(zhuǎn)變?yōu)閿?shù)據(jù)壓縮及格式轉(zhuǎn)變高集成化,實(shí)時(shí)信號(hào)數(shù)據(jù)的壓縮效益及重構(gòu)效益得到了本質(zhì)上的改善。當(dāng)前常見(jiàn)的數(shù)據(jù)傳輸處理技術(shù)主要包括自適應(yīng)多級(jí)樹(shù)集合分裂算法處理技術(shù)、穩(wěn)態(tài)數(shù)據(jù)參數(shù)化壓縮算法處理技術(shù)及基于小波上的參數(shù)化壓縮算法處理技術(shù)等。
存貯體系在構(gòu)建的過(guò)程中可以依照數(shù)據(jù)狀況進(jìn)行對(duì)應(yīng)選取,需要依照大數(shù)據(jù)智能電網(wǎng)性質(zhì)及數(shù)據(jù)狀況形成對(duì)應(yīng)同質(zhì)結(jié)構(gòu),從而保證數(shù)據(jù)存儲(chǔ)的合理性。存貯體系構(gòu)建時(shí)要控制好非結(jié)構(gòu)化及半數(shù)據(jù)化存貯效果,要依照數(shù)據(jù)層次及數(shù)據(jù)同質(zhì)將不同數(shù)據(jù)篩選、分層、轉(zhuǎn)化,形成同樣結(jié)構(gòu)化的系統(tǒng)格式,依照上述格式特征存貯,改善大數(shù)據(jù)智能電網(wǎng)數(shù)據(jù)的查詢效益和處理效益。
當(dāng)前智能電網(wǎng)云中常選取實(shí)施數(shù)據(jù)存儲(chǔ)、分布數(shù)據(jù)存儲(chǔ)等方式,通過(guò)數(shù)據(jù)層次及數(shù)據(jù)狀態(tài)完成各項(xiàng)存貯效果的優(yōu)化,提升系統(tǒng)處理有效性及可靠性。但隨著智能電網(wǎng)發(fā)展內(nèi)容的不斷深化,其非結(jié)構(gòu)化及半結(jié)構(gòu)化數(shù)據(jù)量不斷加大,在上述數(shù)據(jù)信息轉(zhuǎn)變環(huán)境下,形成新的數(shù)據(jù)存儲(chǔ)方式已經(jīng)勢(shì)在必行,在今后大數(shù)據(jù)職能電網(wǎng)建設(shè)中需要進(jìn)行深入研究。
實(shí)時(shí)處理需要對(duì)數(shù)據(jù)處理速度進(jìn)行全面把握,要保證從速度上提升數(shù)據(jù)指標(biāo)的控制效益,從而實(shí)現(xiàn)數(shù)據(jù)內(nèi)容的優(yōu)化。智能電網(wǎng)實(shí)時(shí)處理構(gòu)建時(shí)要首先對(duì)內(nèi)存讀寫(xiě)硬件進(jìn)行提升,要從硬件提升系統(tǒng)數(shù)據(jù)處理的質(zhì)量[2]。其次,要提升數(shù)據(jù)庫(kù)與算法的結(jié)合狀況,形成智能數(shù)據(jù)分析方案,改善智能電網(wǎng)數(shù)據(jù)處理運(yùn)用效益,例如SAP的HANA內(nèi)存數(shù)據(jù)處理體系。再次,要建立系統(tǒng)索引結(jié)構(gòu),適當(dāng)豐富物聯(lián)網(wǎng)技術(shù),依照物聯(lián)網(wǎng)技術(shù)對(duì)索引內(nèi)容進(jìn)行完善,提升系統(tǒng)實(shí)時(shí)處理效益。最后,要強(qiáng)化大數(shù)據(jù)處理體系技術(shù)的選取,依照具體用電狀況及電網(wǎng)運(yùn)行狀況選取對(duì)應(yīng)技術(shù)方案,保證處理的有效性和可靠性。當(dāng)前常見(jiàn)處理技術(shù)主要包括異構(gòu)多數(shù)據(jù)源處理技術(shù)、大數(shù)據(jù)可視化分析技術(shù)等。
(1)異構(gòu)多數(shù)據(jù)源處理技術(shù)。此項(xiàng)技術(shù)主要針對(duì)系統(tǒng)中的異構(gòu)信息,通過(guò)智能電網(wǎng)數(shù)據(jù)庫(kù)完成各項(xiàng)異構(gòu)信息的整合處理,加工大規(guī)模信息數(shù)據(jù)集中、篩選、處理,從而形成簡(jiǎn)化配置數(shù)據(jù)體系。異構(gòu)多數(shù)據(jù)源處理技術(shù)可以在數(shù)據(jù)中心對(duì)上述數(shù)據(jù)進(jìn)行統(tǒng)一處理,以數(shù)據(jù)中心模型規(guī)范數(shù)據(jù)表達(dá)形式,實(shí)現(xiàn)數(shù)據(jù)存儲(chǔ)和查詢內(nèi)容的簡(jiǎn)化,提升存儲(chǔ)和查詢效益。
(2)大數(shù)據(jù)可視化分析技術(shù)。此項(xiàng)技術(shù)主要針對(duì)智能電網(wǎng)中屏幕數(shù)據(jù)顯示狀況,通過(guò)一定的信息技術(shù)手段完成對(duì)大量數(shù)據(jù)的處理,確保數(shù)據(jù)能夠直觀、清晰地在屏幕中全部顯示出來(lái),讓用戶能夠直接了解智能電網(wǎng)數(shù)據(jù)狀況[3]。大數(shù)據(jù)可視化分析技術(shù)中數(shù)據(jù)集可以達(dá)到TB數(shù)量集以上,可以依照定性及定量?jī)煞N形式實(shí)施處理,繪制高精度、高分辨率屏幕圖像,數(shù)據(jù)處理效果非常顯著。
隨著電網(wǎng)設(shè)備的不斷豐富和電力技術(shù)的不斷提升,大數(shù)據(jù)智能電網(wǎng)已成為我國(guó)電網(wǎng)的主要發(fā)展方向。在大數(shù)據(jù)的智能電網(wǎng)建設(shè)過(guò)程中,人員要控制好大數(shù)據(jù)內(nèi)容體系,要依照其內(nèi)容及特征形成對(duì)應(yīng)數(shù)據(jù)庫(kù)、算法及處理體系,提升大數(shù)據(jù)應(yīng)用效益。要適當(dāng)改善大數(shù)據(jù)內(nèi)容體系,對(duì)其數(shù)據(jù)體系進(jìn)行完善,改善數(shù)據(jù)分析效果,提升智能電網(wǎng)系統(tǒng)帶的拓展性和可靠性。
[1]李振元,李寶聚,王澤一. 大數(shù)據(jù)技術(shù)對(duì)我國(guó)電網(wǎng)未來(lái)發(fā)展的影響研究[J]. 吉林電力,2014(1):10-13.
[2]宋亞奇,周國(guó)亮,朱永利. 智能電網(wǎng)大數(shù)據(jù)處理技術(shù)現(xiàn)狀與挑戰(zhàn)[J]. 電網(wǎng)技術(shù),2013(4):927-935.
[3]粟之梁. 大數(shù)據(jù)在智能電網(wǎng)中的技術(shù)應(yīng)用體系和路線圖[J]. 企業(yè)技術(shù)開(kāi)發(fā),2013(20):109-110.
Research on the Construction of Big Data Smart Grid in the New Period
Wei Xiaochen1Wang Zhenchao1Wang Guoxin1Huang Jitai2
1. Qingdao Tgood Design Institute Co., Ltd., Shandong Qingdao 266000 2. Shandong Century Sunshine Paper Group Co., Ltd., Shandong Weifang 261000
The main content of smart grid construction under big data is studied. Firstly, the big data smart grid is analyzed. According to the literature, the characteristics of smart grid under big data are clarified. Then, based on this, the content of smart grid construction under big data is deeply explored from database, algorithm, storage and processing. The content of the project is completed, and the construction of smart grid is perfected, which has a certain contribution to the development of smart grid under big data.
big data; smart grid; characteristics
TM76
A