文/柳玉婷

大數(shù)據(jù)技術(shù)在企事業(yè)檔案管理中的應(yīng)用與研究

文/柳玉婷

唐山市規(guī)劃建筑設(shè)計(jì)研究院

大數(shù)據(jù)技術(shù)在當(dāng)今社會(huì)的各個(gè)領(lǐng)域得到了廣泛應(yīng)用,大數(shù)據(jù)就是數(shù)據(jù)存儲(chǔ)量在TB、PB級(jí)的數(shù)據(jù)存儲(chǔ)技術(shù)和處理技術(shù)，目前我國(guó)的很多企事業(yè)單位都開(kāi)始利用互聯(lián)網(wǎng)和計(jì)算機(jī)對(duì)本單位的人事，業(yè)務(wù)，財(cái)務(wù)等檔案數(shù)據(jù)進(jìn)行信息化管理。隨著信息化在檔案管理領(lǐng)域的影響日益明顯，檔案管理系統(tǒng)需要處理的數(shù)據(jù)量月來(lái)越大，各個(gè)單位檔案管理從信息化開(kāi)始進(jìn)入大數(shù)據(jù)時(shí)代。本文著重探討如何利用大數(shù)據(jù)處理技術(shù)處理大量的檔案管理數(shù)據(jù)，并以一個(gè)基于大數(shù)據(jù)技術(shù)的企事業(yè)檔案管理信息系統(tǒng)實(shí)例來(lái)說(shuō)明大數(shù)據(jù)技術(shù)在檔案管理領(lǐng)域的應(yīng)用。

大數(shù)據(jù)；檔案管理；.netframework

1 引言

大數(shù)據(jù)就是數(shù)據(jù)存儲(chǔ)量在TB、PB級(jí)的數(shù)據(jù)存儲(chǔ)技術(shù)和處理技術(shù)，目前我國(guó)的很多企事業(yè)單位都開(kāi)始利用互聯(lián)網(wǎng)和計(jì)算機(jī)對(duì)本單位的人事，業(yè)務(wù)，財(cái)務(wù)等檔案數(shù)據(jù)進(jìn)行信息化管理。隨著信息化在檔案管理領(lǐng)域的影響日益明顯，檔案管理系統(tǒng)需要處理的數(shù)據(jù)量月來(lái)越大，各個(gè)單位檔案管理從信息化開(kāi)始進(jìn)入大數(shù)據(jù)時(shí)代。本文著重探討如何利用大數(shù)據(jù)處理技術(shù)處理大量的檔案管理數(shù)據(jù)，并結(jié)合筆者團(tuán)隊(duì)所開(kāi)發(fā)的基于大數(shù)據(jù)技術(shù)的企事業(yè)檔案管理信息系統(tǒng)實(shí)例大數(shù)據(jù)從動(dòng)態(tài)建模創(chuàng)建界面、數(shù)據(jù)加密，多維度查詢(xún)?nèi)齻€(gè)技術(shù)角度來(lái)來(lái)說(shuō)明大數(shù)據(jù)技術(shù)在檔案管理領(lǐng)域的應(yīng)用?；诖髷?shù)據(jù)技術(shù)的企事業(yè)檔案管理信息系統(tǒng)平臺(tái)應(yīng)用計(jì)算機(jī)網(wǎng)絡(luò)技術(shù)、微軟.netframework平臺(tái)，依托現(xiàn)有本單位現(xiàn)有的互聯(lián)網(wǎng)平臺(tái)，研究檔案管理、檔案數(shù)據(jù)的高速存儲(chǔ)、通過(guò)對(duì)檔案的動(dòng)態(tài)建模技術(shù)實(shí)現(xiàn)對(duì)多樣化數(shù)據(jù)檔案的存儲(chǔ)和查詢(xún)功能，實(shí)現(xiàn)對(duì)檔案工作的全方位網(wǎng)絡(luò)化管理，使檔案管理全過(guò)程更為科學(xué)、有效、安全、可控，進(jìn)一步優(yōu)化管理流程，提高檔案資源使用效率。

2 動(dòng)態(tài)建模技術(shù)在檔案管理中的應(yīng)用

檔案數(shù)據(jù)存儲(chǔ)的動(dòng)態(tài)建模技術(shù)研究。由于檔案數(shù)據(jù)歷史跨度大，檔案數(shù)據(jù)內(nèi)容變化大.用單一模塊來(lái)存儲(chǔ)檔案數(shù)據(jù)無(wú)法實(shí)現(xiàn)對(duì)檔案數(shù)據(jù)存儲(chǔ)的要求.為此本課題提出研究了一種動(dòng)態(tài)建模技術(shù),利用該技術(shù)檔案管理員可以自己定義所需的檔案數(shù)據(jù)存儲(chǔ)模塊界面和數(shù)據(jù)表結(jié)構(gòu).系統(tǒng)將根據(jù)檔案管理員自定義的存儲(chǔ)結(jié)構(gòu)自動(dòng)生成檔案管理員所需的功能界面和后臺(tái)數(shù)據(jù)表.結(jié)合唐山市建筑規(guī)劃設(shè)計(jì)院檔案管理實(shí)際，研究切實(shí)可行的動(dòng)態(tài)建模技術(shù)來(lái)快速高效的實(shí)現(xiàn)對(duì)現(xiàn)有檔案數(shù)據(jù)的電子化存儲(chǔ)。動(dòng)態(tài)建模技術(shù)在檔案管理信息系統(tǒng)要想創(chuàng)建動(dòng)態(tài)的檔案數(shù)據(jù)模型結(jié)構(gòu)需要以下幾個(gè)步驟.第一,利用EXCEL電子表格里定義檔案的數(shù)據(jù)結(jié)構(gòu).第二,將定義好的檔案數(shù)據(jù)結(jié)構(gòu)在數(shù)據(jù)庫(kù)內(nèi)創(chuàng)建數(shù)據(jù)表.第三,選擇定義好的存儲(chǔ)檔案的數(shù)據(jù)表創(chuàng)建對(duì)該檔案數(shù)據(jù)的增、刪、改、查的功能模塊。

3 檔案精確多維查詢(xún)技術(shù)研究

結(jié)合唐山建筑規(guī)劃設(shè)計(jì)院實(shí)際及技術(shù)發(fā)展趨勢(shì)，研究檔案查詢(xún)的組合條件構(gòu)造方法、檔案數(shù)據(jù)索引技術(shù)。利用軟件系統(tǒng)提供的邏輯運(yùn)算符與、或、非和關(guān)系運(yùn)算符（包括大于、等于、小于、大于等于、小于等于，不等于）將查詢(xún)條件進(jìn)行聯(lián)立查詢(xún)，實(shí)現(xiàn)對(duì)數(shù)據(jù)的多維查詢(xún)。

在條件查詢(xún)界面可以選擇該數(shù)據(jù)表的字段來(lái)確定顯示查詢(xún)結(jié)果時(shí)展示那幾個(gè)字段。在條件1，條件2 ，條件3 中設(shè)置查詢(xún)條件。先選擇字段名再確定查詢(xún)的值。字段名與查詢(xún)的值用=，!=，〉，<,>=,<=,like（模糊查詢(xún)）的方式來(lái)設(shè)置查詢(xún)條件。單擊查詢(xún)按鈕后可以將查詢(xún)記錄顯示在下面的列表中。

4 改進(jìn)的數(shù)據(jù)加密技術(shù)的實(shí)現(xiàn)

改進(jìn)的檔案數(shù)據(jù)加密算法研究保密數(shù)據(jù)數(shù)據(jù)只能在指定的計(jì)算機(jī)上處理.對(duì)二進(jìn)制異或加密的密鑰做了改進(jìn).做異或加密時(shí)加密的密鑰是具備訪問(wèn)、修改或者刪除這者項(xiàng)數(shù)據(jù)權(quán)限的計(jì)算機(jī)的物理地址。也就利用MAC地址作為數(shù)據(jù)加密密鑰的地址。在做數(shù)據(jù)加密時(shí),考慮的有些保密數(shù)據(jù)數(shù)據(jù)只能在指定的計(jì)算機(jī)上處理.我們對(duì)二進(jìn)制異或加密的密鑰做了改進(jìn)。就是在做異或加密時(shí)加密的密鑰是具備訪問(wèn)、修改或者刪除這者項(xiàng)數(shù)據(jù)權(quán)限的計(jì)算機(jī)的物理地址.也就mac地址.我們的系統(tǒng)會(huì)記錄具備訪問(wèn)、修改、刪除權(quán)限某項(xiàng)保密檔案數(shù)據(jù)的客戶(hù)端計(jì)算機(jī)的mac地址.當(dāng)某個(gè)不具備權(quán)限的計(jì)算機(jī)客戶(hù)端訪問(wèn)保密數(shù)據(jù)時(shí),即使登陸密碼用戶(hù)名正確由于從這個(gè)客戶(hù)端取到的mac地址不是系統(tǒng)之前記錄的mac地址,用這個(gè)mac地址作為解密的密鑰產(chǎn)生的數(shù)據(jù)依然無(wú)法使用可讀。

5 總結(jié)

本文給出了大數(shù)據(jù)技術(shù)中常用的動(dòng)態(tài)建模技術(shù)、數(shù)據(jù)加密技術(shù)和多維查詢(xún)技術(shù)在檔案管理中的應(yīng)用。利用該技術(shù)檔案管理員可以自己定義所需的檔案數(shù)據(jù)存儲(chǔ)模塊界面和數(shù)據(jù)表結(jié)構(gòu).系統(tǒng)將根據(jù)檔案管理員自定義的存儲(chǔ)結(jié)構(gòu)自動(dòng)生成檔案管理員所需的功能界面和后臺(tái)數(shù)據(jù)表.結(jié)合唐山市建筑規(guī)劃設(shè)計(jì)院檔案管理實(shí)際，研究切實(shí)可行的動(dòng)態(tài)建模技術(shù)來(lái)快速高效的實(shí)現(xiàn)對(duì)現(xiàn)有檔案數(shù)據(jù)的電子化存儲(chǔ)。大大降低了檔案管理信息系統(tǒng)的維護(hù)成本，以每年我院系統(tǒng)維護(hù)成本5-6萬(wàn)元計(jì)算，基于動(dòng)態(tài)建模技術(shù)的檔案管理信息系統(tǒng)的年維護(hù)成本只有不到5000元，年節(jié)約費(fèi)用5萬(wàn)余元，應(yīng)用3年來(lái)共節(jié)約費(fèi)用15萬(wàn)。系統(tǒng)的應(yīng)用為設(shè)計(jì)院的圖紙管理規(guī)范化和項(xiàng)目管理的規(guī)范化提供了巨大的幫助，也提高大大提高了唐山規(guī)劃建筑設(shè)計(jì)研究院的工作效率。

另外，由于基于大數(shù)據(jù)技術(shù)的檔案管理信息系統(tǒng)的使用，為唐山規(guī)劃建筑設(shè)計(jì)院培養(yǎng)了一批及懂計(jì)算機(jī)又懂檔案管理的檔案管理復(fù)合型人才隊(duì)伍，大大提高了唐山市規(guī)劃建筑設(shè)計(jì)研究院和合作單位的檔案管理隊(duì)伍的人員素質(zhì)水平。