張帆,喬天罡,盧燕虹,陳琳榮,陳聰吉林省地震局;吉林省四平市地震臺(tái);吉林省震害防御中心
吉林省地震業(yè)務(wù)大數(shù)據(jù)調(diào)研整理
張帆1,喬天罡2,盧燕虹1,陳琳榮3,陳聰1
1吉林省地震局;2吉林省四平市地震臺(tái);3吉林省震害防御中心
目前吉林全省已經(jīng)建成近30個(gè)地震監(jiān)測臺(tái)站。經(jīng)初步測算,我省所有臺(tái)站每年產(chǎn)生的數(shù)據(jù)總量5TB左右,每天產(chǎn)生數(shù)據(jù)量為14G左右,涵蓋了前兆、測震、火山、安評(píng)等多種業(yè)務(wù)數(shù)據(jù)。隨著2006年十五期間地震領(lǐng)域由模擬時(shí)代向數(shù)字化時(shí)代轉(zhuǎn)變以來,業(yè)務(wù)水平突飛猛進(jìn),數(shù)據(jù)量也不斷的龐大,傳統(tǒng)的關(guān)系型數(shù)據(jù)庫已經(jīng)難以提供相應(yīng)的數(shù)據(jù)存儲(chǔ)管理和處理能力,缺點(diǎn)也逐漸顯露出來,很多歷史數(shù)據(jù)以硬盤、圖紙、光盤等介質(zhì)進(jìn)行存儲(chǔ),這些數(shù)據(jù)具備兩個(gè)基本特征[2]:數(shù)據(jù)量巨大、數(shù)據(jù)類型多樣。而傳統(tǒng)的介質(zhì)存儲(chǔ)一旦損壞或遺失,一些寶貴的歷史數(shù)據(jù)將會(huì)永遠(yuǎn)的失去,產(chǎn)生的損失不可估計(jì)。另外傳統(tǒng)的關(guān)系型數(shù)據(jù)存儲(chǔ)形式,也導(dǎo)致了各個(gè)業(yè)務(wù)之間缺少橫向?qū)Ρ龋瑢?duì)地震業(yè)務(wù)的綜合分析一直是一個(gè)瓶頸。為了能夠?qū)θ『A康卣饦I(yè)務(wù)數(shù)據(jù)進(jìn)行在線存儲(chǔ)、共享、管理和查詢分析,建立了具有高可靠、可在線彈性伸縮,滿足高吞吐量并發(fā)訪問需求的云存儲(chǔ)與計(jì)算平臺(tái)。為數(shù)據(jù)存儲(chǔ)和高效計(jì)算提供便捷、統(tǒng)一管理和高效應(yīng)用的基礎(chǔ)平臺(tái)支撐。因此,對(duì)吉林省地震相關(guān)業(yè)務(wù)進(jìn)行了全方位的數(shù)據(jù)統(tǒng)計(jì)和搶修工作,對(duì)地震監(jiān)測、震情分析、地震應(yīng)急有著重要的意義。
吉林省地震與火山監(jiān)測中心2007年實(shí)現(xiàn)測震業(yè)務(wù)全面信息化建設(shè)并投入使用,測震數(shù)據(jù)自2007年以來,考慮到傳統(tǒng)軟件的數(shù)據(jù)處理能力,歷史數(shù)據(jù)以硬盤存儲(chǔ)的方式進(jìn)行保存。隨著吉林省地震臺(tái)網(wǎng)的不斷完善,測震業(yè)務(wù)數(shù)據(jù)從2007年開始的每年數(shù)據(jù)總量160G到2015年為止每年數(shù)據(jù)總量660G,每年數(shù)據(jù)量遞增了五倍。到目前位置,總數(shù)總量約8100G。
前兆業(yè)務(wù)數(shù)據(jù)從2007年開始至今,吉林省20個(gè)臺(tái)站記錄的前兆業(yè)務(wù)數(shù)據(jù)總體數(shù)據(jù)量5T左右,存儲(chǔ)量龐大,傳統(tǒng)的存儲(chǔ)形式已經(jīng)到了飽和階段,而且數(shù)據(jù)種類繁多,涵蓋地磁、地電、流體、形變、氣象等內(nèi)容。
吉林省長白山天池火山監(jiān)測站1999年7月投入觀測,先后建有流動(dòng)地震觀測臺(tái)網(wǎng)和中心臺(tái),其中位于山上觀測山洞的CBS地震臺(tái),自建成以來就連續(xù)觀測,連續(xù)性高,數(shù)據(jù)質(zhì)量好,運(yùn)行情況如下:
1999年07月-2007年06月該臺(tái)使用的地震計(jì)為FBS-3A型寬頻帶地震計(jì),數(shù)采為EDAS-24L6型數(shù)據(jù)采集器,產(chǎn)出數(shù)據(jù)為EⅤT格式數(shù)據(jù),可用RDSEED或Event2SAC軟件方便地轉(zhuǎn)換成SAC格式數(shù)據(jù)。
2007年07月-現(xiàn)在該臺(tái)開始使用CTS-1E型寬頻地震計(jì),數(shù)據(jù)統(tǒng)一由省局臺(tái)網(wǎng)中心保存,數(shù)據(jù)格式為SEED格式,可用Event2SAC轉(zhuǎn)換成SAC格式的數(shù)據(jù)。
1999-2006年建立5個(gè)流動(dòng)地震臺(tái),分別是東大坡臺(tái)(DDP)、西大坡臺(tái)(XDP)、氣象站臺(tái)(QXZ)、維東臺(tái)(WDT)和雙目峰臺(tái)(SMF),這些臺(tái)站一般夏季觀測,冬季基本停測,數(shù)據(jù)質(zhì)量不穩(wěn)定,連續(xù)性也不好,使用的觀測儀器為JC-Ⅴ100-3D短周期地震計(jì),數(shù)采為EDAS-3M型數(shù)據(jù)采集器,產(chǎn)出數(shù)據(jù)擴(kuò)展名為EDA,不方便用Event2SAC軟件批量導(dǎo)出SAC格式數(shù)據(jù)。
2006年至今,長白山火山地震臺(tái)站數(shù)量擴(kuò)大到11個(gè),分別是火山站臺(tái)(CBS)、東大坡臺(tái)(DDP)、西大坡臺(tái)(XDP)、氣象站臺(tái)(QXZ)、維東臺(tái)(WDT)、雙目峰臺(tái)(SMF)、中心臺(tái)(ZXT)、山門臺(tái)(SMT)、長白臺(tái)(CBT)、漫江臺(tái)(MJT)和橫山臺(tái)(HST)。其中3個(gè)臺(tái)站為短周期地震臺(tái),其它均為寬頻帶地震臺(tái)?;鹕秸九_(tái)(CBS)、中心臺(tái)(ZXT)、山門臺(tái)(SMT)、長白臺(tái)(CBT)、漫江臺(tái)(MJT)是有線傳輸臺(tái)站,數(shù)據(jù)格式為SEED,其它6個(gè)臺(tái)站不傳輸,數(shù)據(jù)格式為EⅤT格式數(shù)據(jù),數(shù)據(jù)擴(kuò)展名為dat,可用Event2SAC批量轉(zhuǎn)換成SAC格式數(shù)據(jù)。
當(dāng)前,吉林省地震臺(tái)網(wǎng)中心對(duì)大數(shù)據(jù)的處理分析正成為新一代信息技術(shù)融合應(yīng)用的節(jié)點(diǎn)。移動(dòng)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、社交網(wǎng)絡(luò)、數(shù)字家庭、電子商務(wù)等是新一代信息技術(shù)的應(yīng)用形態(tài),這些應(yīng)用不斷產(chǎn)生大數(shù)據(jù)。通過對(duì)不同來源數(shù)據(jù)的管理、處理、分析與優(yōu)化,將結(jié)果反饋到上述應(yīng)用中,將創(chuàng)造出巨大的經(jīng)濟(jì)和社會(huì)價(jià)值。
[1](美)懷特.Hadoop權(quán)威指南.清華大學(xué)出版社.2010
[2](英)維克托.邁爾-舍恩伯格.大數(shù)據(jù)時(shí)代.浙江人民出版社.2013
Survey and Research on seismic data of Jilin Province
Zhang Fan1,Qiao Tiangang2,Lu Yanhong1,Chen Linrong3,Chen Cong1
1Earthquake Administration of Jilin Province;2Siping City of Jilin province seismic station,Siping;3Earthquake disaster prevention center of Jilin Province
在傳統(tǒng)關(guān)系型數(shù)據(jù)庫難以滿足正常業(yè)務(wù)存儲(chǔ)和管理能力的情況下,對(duì)吉林省測震臺(tái)網(wǎng)中心及其涵蓋的測震臺(tái)站的業(yè)務(wù)數(shù)據(jù)進(jìn)行統(tǒng)計(jì)和整理,以hadoop大數(shù)據(jù)技術(shù)[1]為基礎(chǔ)平臺(tái)進(jìn)行存儲(chǔ)和處理,提供了數(shù)據(jù)的輸入、歷史數(shù)據(jù)導(dǎo)入、業(yè)務(wù)數(shù)據(jù)的共享等應(yīng)用。為業(yè)務(wù)人員業(yè)務(wù)情況的分析和研究提供重要的信息化平臺(tái)。
關(guān)系型數(shù)據(jù)庫;大數(shù)據(jù);信息化
It is difficult to meet in the traditional relational database storage and management of normal business ability,statistics and sorting business data seismic network center and seismic stations covered in Jilin Province,Hadoop big data technology for storage and processing platform,provides data input,data import,data business history sharing application.Provide an important information platform for the analysis and research of the business situation.
Relational database;big data;information
吉林省地震局科研合同制課題《大數(shù)據(jù)搜集調(diào)研整理》(2016012),中國地震局監(jiān)測、預(yù)報(bào)、科研三結(jié)合課題(160703)。
張帆(1982-),男,吉林省松原市人,學(xué)士,助理工程師,現(xiàn)主要從事地震與火山監(jiān)測工作。