計(jì)算機(jī)大數(shù)據(jù)信息處理技術(shù)的探討

郭雙源

摘要：本文首先分析了計(jì)算機(jī)大數(shù)據(jù)信息處理技術(shù)中存在的問題，隨后研究了計(jì)算機(jī)大數(shù)據(jù)信息處理技術(shù)的實(shí)際應(yīng)用，以此來供相關(guān)人士交流參考。

關(guān)鍵詞：計(jì)算機(jī);大數(shù)據(jù);信息處理技術(shù)

引言

當(dāng)前互聯(lián)網(wǎng)需要接收來自于世界各地的不同數(shù)據(jù)信息，傳統(tǒng)的數(shù)據(jù)處理方式已經(jīng)不能滿足于現(xiàn)階段的計(jì)算機(jī)數(shù)據(jù)處理。在這種情況下，相關(guān)的技術(shù)人員開發(fā)出了專門用于處理計(jì)算機(jī)網(wǎng)絡(luò)數(shù)據(jù)的新型技術(shù)。目前，我國政府、大型企業(yè)、事業(yè)單位每天都需要處理大量的數(shù)據(jù)，然而在計(jì)算機(jī)數(shù)據(jù)處理工作中仍存在著諸多問題，這也就需要技術(shù)人員使用合理的數(shù)據(jù)信息處理技術(shù)，提高信息處理效率。

一、計(jì)算機(jī)大數(shù)據(jù)信息處理技術(shù)中存在的問題

由于數(shù)據(jù)流的不斷擴(kuò)大以及數(shù)據(jù)量的暴漲，導(dǎo)致很多運(yùn)營商所提供的寬帶不足以支撐目前的數(shù)據(jù)流，這樣相關(guān)運(yùn)營商面對著史無前例的挑戰(zhàn)，化解管道壓力和“云-管-端”的高效設(shè)備也同樣面臨著全新的挑戰(zhàn)[1]。

（一）技術(shù)框架建立不夠完善

目前，技術(shù)框架所面臨的問題主要是涉及數(shù)據(jù)庫管理的有關(guān)技術(shù)和實(shí)時(shí)性技術(shù)之間的搭配問題。由于當(dāng)前數(shù)據(jù)量的激增，數(shù)據(jù)容量已經(jīng)從原來的TB轉(zhuǎn)換到EB和ZB的級(jí)別，這一轉(zhuǎn)換就需要盡快更新原來的數(shù)據(jù)庫信息，使得更新后的數(shù)據(jù)庫能夠完成大數(shù)據(jù)的分析[1]。但是，在實(shí)現(xiàn)數(shù)據(jù)實(shí)時(shí)處理的問題上，我國現(xiàn)有的技術(shù)還不能夠滿足需求，如何在最短的時(shí)間內(nèi)完成對數(shù)據(jù)的處理，是目前大數(shù)據(jù)時(shí)代所面臨的嚴(yán)峻考驗(yàn)。

（二）數(shù)據(jù)處理量過大

由于數(shù)據(jù)的承載量過大，導(dǎo)致系統(tǒng)中存儲(chǔ)著大批量待解決的數(shù)據(jù)，因此數(shù)據(jù)的處理問題也是目前迫在眉睫需要解決的困難之一[2]。之前傳統(tǒng)的數(shù)據(jù)處理方式容量較小，在添加新的數(shù)據(jù)信息時(shí)可能會(huì)導(dǎo)致之前的數(shù)據(jù)被擠掉，造成舊數(shù)據(jù)的丟失，不能保證數(shù)據(jù)的完整性。大數(shù)據(jù)作為數(shù)據(jù)的類型之一，它的處理是建立在硬盤上的，通過硬盤完成大數(shù)據(jù)的處理，對此，需要對硬盤進(jìn)行及時(shí)的更新升級(jí)，讓硬盤能夠跟上大數(shù)據(jù)的處理?xiàng)l件，促進(jìn)大數(shù)據(jù)的發(fā)展。

（三）數(shù)據(jù)的安全問題

由于大數(shù)據(jù)被廣泛應(yīng)用于各個(gè)領(lǐng)域，因此之前所使用的數(shù)據(jù)安全準(zhǔn)則已經(jīng)被時(shí)代淘汰，對于大數(shù)據(jù)時(shí)代需要修訂出新的數(shù)據(jù)安全準(zhǔn)則，從而滿足大數(shù)據(jù)發(fā)展下的數(shù)據(jù)安全需求[3]。從目前的數(shù)據(jù)現(xiàn)實(shí)來看，數(shù)據(jù)量的增加趨勢是無序且非線性的，因此應(yīng)對數(shù)據(jù)流的增加需要應(yīng)用專業(yè)的流程，除此之外，只有完善安全措施才能滿足大數(shù)據(jù)時(shí)代的安全需求。

二、計(jì)算機(jī)大數(shù)據(jù)信息處理技術(shù)的實(shí)際應(yīng)用

（一）云數(shù)據(jù)庫

云計(jì)算和云數(shù)據(jù)庫之間息息相關(guān)，二者具有密不可分的聯(lián)系，通過云計(jì)算將所有的數(shù)據(jù)信息收集和匯總到的數(shù)據(jù)信息庫就是云數(shù)據(jù)庫[4]。相較于原先的數(shù)據(jù)庫來說，云數(shù)據(jù)庫能夠處理相當(dāng)多的數(shù)據(jù)信息，能夠優(yōu)化有限資源的合理配置，提升設(shè)備和軟件更新的效率，自動(dòng)化技術(shù)在很多方面也都取代了人工操作。由于服務(wù)系統(tǒng)在云數(shù)據(jù)庫內(nèi)部，用戶可以隨時(shí)隨地利用互聯(lián)網(wǎng)或者任何的智能設(shè)備來應(yīng)用云數(shù)據(jù)庫中的自己所需要的功能，整個(gè)過程不用再閱讀額外的功能介紹說明書和注意事項(xiàng)，節(jié)省了大量的時(shí)間，操作流程也容易上手。每個(gè)人對數(shù)據(jù)信息處理的要求都具有差異性，而云數(shù)據(jù)庫也正是考慮到了這種差異性，通過云端服務(wù)器將用戶的數(shù)據(jù)信息進(jìn)行管理。因?yàn)橛脩羰种械闹悄茉O(shè)備大多處理空間有限，而且數(shù)據(jù)信息容易丟失，很多計(jì)算機(jī)企業(yè)都創(chuàng)建了讓用戶能夠自行操作的云數(shù)據(jù)處理平臺(tái)，幫助用戶實(shí)現(xiàn)不占設(shè)備空間的數(shù)據(jù)處理功能。

（二）信息數(shù)據(jù)安全技術(shù)的實(shí)際應(yīng)用

在大數(shù)據(jù)創(chuàng)新處理技術(shù)的支撐與輔佐下，APT的安全攻擊被有效抵御了。因?yàn)锳PT的攻擊特點(diǎn)是單點(diǎn)隱蔽能力強(qiáng)、攻擊方式途徑未知、潛伏期較長、攻擊后持續(xù)性較長等，這些都不利于云計(jì)算的發(fā)展。但是，全流量的審計(jì)方案能夠有效規(guī)避這些風(fēng)險(xiǎn)的存在，充分運(yùn)用網(wǎng)絡(luò)安全人員的能力和計(jì)算機(jī)處理及其運(yùn)算能力，將這三者有機(jī)結(jié)合，形成一種比較有效且完備的解決方案。基于此方案的建立，能夠大大提高大數(shù)據(jù)背景下的信息安全問題，這樣做有利于大數(shù)據(jù)的進(jìn)一步發(fā)展。

（三）分布式文件系統(tǒng)

由于計(jì)算機(jī)大數(shù)據(jù)系統(tǒng)收集到的數(shù)據(jù)信息是來自于不同的計(jì)算機(jī)設(shè)備，而且不同的計(jì)算機(jī)設(shè)備當(dāng)中本身也具有用于處理數(shù)據(jù)信息的空間，分布式文件系統(tǒng)需要做到的就是既要對整個(gè)大數(shù)據(jù)網(wǎng)絡(luò)進(jìn)行管理，也要維護(hù)每個(gè)計(jì)算機(jī)設(shè)備的數(shù)據(jù)信息處理系統(tǒng)。技術(shù)人員在開發(fā)分布式文件系統(tǒng)時(shí)必須從行業(yè)發(fā)展的實(shí)際情況和用戶的實(shí)際需求出發(fā)，使得系統(tǒng)能夠?qū)崿F(xiàn)對數(shù)據(jù)信息的高質(zhì)量處理和管理Hadoop HDFS是如今計(jì)算機(jī)行業(yè)中廣泛應(yīng)用的分布式文件系統(tǒng)之一，這種分布式文件系統(tǒng)相較于其它分布式文件系統(tǒng)來說，提升了數(shù)據(jù)信息處理的效率，強(qiáng)化了數(shù)據(jù)信息處理的安全性。同時(shí)，Hadoop HDFS所需配備的硬件設(shè)施價(jià)格更低、操作起來更加方便簡易、處理量更高、可以支持在不同平臺(tái)中同時(shí)運(yùn)行，這都是Hadoop HDFS分布式文件系統(tǒng)相較于其它分布式文件系統(tǒng)的優(yōu)勢所在。然而，Hadoop HDFS也具有很多缺陷，類似于不適合處理數(shù)量多的小型文件、文件程序具有固定性等等問題。

（四）分布式數(shù)據(jù)庫

Hbase如今計(jì)算機(jī)行業(yè)中廣泛應(yīng)用的分布式數(shù)據(jù)庫之一，相較于其它分布式數(shù)據(jù)庫來說，將它應(yīng)用到數(shù)據(jù)信息的處理工作當(dāng)中能夠大大提升數(shù)據(jù)信息管理的安全性和穩(wěn)定性。同時(shí)，Hbase能夠適用于各種各樣的服務(wù)器，這種分布式數(shù)據(jù)庫在處理信息時(shí)的操作更加簡易，減去了很多復(fù)雜難懂的流程，能夠在 Hbase分布式數(shù)據(jù)庫當(dāng)中處理各種形態(tài)的數(shù)據(jù)信息?？傮w來說， Hbase分布式數(shù)據(jù)庫相較于普通的分布式數(shù)據(jù)庫來說受到的限制更少。

三、結(jié)束語

綜上所述，由于大數(shù)據(jù)已經(jīng)加入到了人類社會(huì)中，因此人們在大數(shù)據(jù)時(shí)代得到了更多發(fā)展計(jì)劃也同時(shí)面臨著各種各樣的挑戰(zhàn)。為了避免在大數(shù)據(jù)時(shí)代被淘汰，人們還需要不斷提高自身的數(shù)據(jù)處理能力，完成對大數(shù)據(jù)的應(yīng)用。

參考文獻(xiàn)：

[1]姜昊，劉雨昂.“大數(shù)據(jù)”時(shí)代背景下計(jì)算機(jī)信息處理技術(shù)[J].電子技術(shù)與軟件工程，2019，0（1）：143-143.

[2]曲濱鵬，繆佳，朱麗娜.大數(shù)據(jù)背景下的計(jì)算機(jī)信息處理技術(shù)應(yīng)用與實(shí)踐[J].電子技術(shù)與軟件工程，2020，0（1）：109-110.

[3]劉麗鳳.試論基于大數(shù)據(jù)視域下計(jì)算機(jī)信息處理系統(tǒng)的優(yōu)化設(shè)計(jì)[J].電腦知識(shí)與技術(shù)：學(xué)術(shù)版，2020，16（5）：12-13.

[4]古麗米熱·依布拉音.計(jì)算機(jī)應(yīng)用技術(shù)與信息管理的整合路徑研究[J].衛(wèi)星電視與寬帶多媒體，2021（3）：66-67.

成都理工大學(xué)工程技術(shù)學(xué)院 四川樂山 614000