基于Hadoop的遙感影像節(jié)能存儲策略分析

彭俊珍

摘要：本文闡述了Hadoop和遙感影像的理論，并對Hadoop儲存系統(tǒng)進行了分析，主要研究系統(tǒng)的節(jié)能儲存模塊。遙感技術是當前社會中應用的重要技術，其在應用過程中，能夠?qū)崿F(xiàn)遙感影像的成形對于地理信息的處理有非常重要的作用。而針對遙感影像數(shù)據(jù)的特點，設計了基于Hadoop技術之上的遙感影像數(shù)據(jù)儲存系統(tǒng)，從而在一定程度上提升了遙感影像數(shù)據(jù)的儲存應用。

關鍵詞：Hadoop;遙感技術;技能儲存

在當前社會發(fā)展的過程中，遙感技術、網(wǎng)絡技術以及信息技術對于數(shù)據(jù)處理技術具有一定的依賴性，數(shù)據(jù)處理技術的應用在一定程度上決定了遙感技術的應用質(zhì)量。其主要完成了遙感技術模塊中的數(shù)據(jù)儲存功能以及數(shù)據(jù)計算功能。而在當前遙感技術的發(fā)展下，其影像分辨率越來越高，也在一定程度上影響了遙感影響數(shù)據(jù)的儲存量。所以，當前研究Hadoop遙感影響儲存技術對于未來遙感技術的應用非常關鍵。

1 Hadoop與遙感影像的簡要介紹

1.1 Hadoop技術的簡要闡述

隨著計算機技術、智能化技術的逐漸應用，社會開始對數(shù)據(jù)技術有了新的認識，數(shù)據(jù)技術在最近幾年不斷發(fā)展，在一定程度上決定未來現(xiàn)代技術的發(fā)展高度。而Hadoop技術就是一種數(shù)據(jù)運算技術，其采用分布式運算的方法進行數(shù)據(jù)計算，在很大程度上提升了數(shù)據(jù)計算的效率。在實際的Hadoop數(shù)據(jù)處理中，其建立了HDFS組件基礎上的數(shù)據(jù)儲存和運算系統(tǒng)，在實際的系統(tǒng)設計過程中，采用了以流方式進行數(shù)據(jù)文件系統(tǒng)方法，也最大程度上提升了數(shù)據(jù)系統(tǒng)的工作運行效率。

Hadoop數(shù)據(jù)技術構(gòu)建了分布式運算軟件系統(tǒng)，其具有可靠性高、擴展性高、數(shù)據(jù)成本低的特點。在當前數(shù)據(jù)處理過程中，應用到Hadoop數(shù)據(jù)技術不僅實現(xiàn)了數(shù)據(jù)計算的高精度提升，更是在一定程度上提升了數(shù)據(jù)儲存的節(jié)能性。在Hadoop數(shù)據(jù)系統(tǒng)應用的過程中，HDFS軟件模塊是其核心工作模塊，完成了數(shù)據(jù)訪問方式的確定。

在當前，數(shù)據(jù)技術發(fā)展過程中，以分布式計算方式為基礎的云計算技術是先進的大數(shù)據(jù)技術，Hadoop也采用分布式計算方式，將成為未來數(shù)據(jù)處理技術發(fā)展的主流方向之一。

1.2 遙感影像的簡要闡述

遙感技術也是當前社會發(fā)展過程中應用的重要技術，在地理測繪、地理定位技術當中都有非常良好的應用。而在實際的應用過程中，遙感影像是指通過遙感技術實現(xiàn)的圖像及相關數(shù)據(jù)。在遙感技術應用的過程中，其主要應用了光學技術來完成數(shù)據(jù)轉(zhuǎn)換，并實現(xiàn)遙感技術應用。在遙感技術應用過程中，分辨率是影響其數(shù)據(jù)質(zhì)量的主要因素，其主要包括空間、光譜分辨率、輻射以及時間等因素，從而對數(shù)據(jù)處理造成了一定的影響。而在當前，隨著遙感技術的不斷進步，遙感影像成像過程中，其分辨率也在不斷的提升，最終在一定程度上促進了遙感影像數(shù)據(jù)的高質(zhì)量提升。而在遙感影像數(shù)據(jù)提升之后，對于數(shù)據(jù)計算、數(shù)據(jù)儲存技術應用又造成了一定的影響。所以，在當前技術發(fā)展的過程中，研究Hadoop基礎上的遙感影像數(shù)據(jù)儲存技術非常關鍵，直接關系到遙感技術的使用效率。

2 Hadoop遙感數(shù)據(jù)儲存處理系統(tǒng)的設計分析

本文筆者研究了基于Hadoop技術的遙感數(shù)據(jù)儲存處理系統(tǒng)，其系統(tǒng)設計對于遙感數(shù)據(jù)儲存而言有非常重要的意義。以下是對Hadoop遙感數(shù)據(jù)儲存系統(tǒng)的設計總結(jié)。

2.1 Hadoop遙感數(shù)據(jù)系統(tǒng)功能分析

在系統(tǒng)設計之前對其需求進行設計分析十分關鍵，直接關系到系統(tǒng)應用的效率。在當前Hadoop數(shù)據(jù)系統(tǒng)功能設計中，主要針對使用者對數(shù)據(jù)管理的需求進行設計。

2.1.1 數(shù)據(jù)管理員需求設計

數(shù)據(jù)管理員需要應用系統(tǒng)對數(shù)據(jù)進行管理，所以在實際的功能設計中，構(gòu)建了遙感數(shù)據(jù)入庫技術、遙感影像金字塔技術、遙感數(shù)據(jù)出庫功能模塊以及相關文件管理模塊等部分組成，一定程度上提升了數(shù)據(jù)模塊處理的效率。

2.1.2針對用戶進行了數(shù)據(jù)系統(tǒng)功能設計

用戶也是使用Hadoop系統(tǒng)的主體，在實際的系統(tǒng)用戶功能構(gòu)建中，主要構(gòu)建了數(shù)據(jù)查詢功能、影像信息觀看功能以及地圖搜索功能等模塊。保證系統(tǒng)實際使用狀態(tài)良好。

2.1.3 Hadoop系統(tǒng)設計中，包括系統(tǒng)管理員設計功能

管理人員要對日常的系統(tǒng)使用進行規(guī)范化管理，從而保證管理效率更高，也能夠在一定程度上完成對整個系統(tǒng)的工作運行維護。在實際的功能設計中，主要包括Hadoop系統(tǒng)的權(quán)限管理功能、系統(tǒng)的用戶模塊管理功能、系統(tǒng)任務管理以及日志監(jiān)控管理等功能，從而在一定程度上也提升了工作運行的效率。

2.2 Hadoop遙感數(shù)據(jù)系統(tǒng)的框架設計

在實際的系統(tǒng)設計中，為了保證系統(tǒng)能夠合理完成遙感數(shù)據(jù)儲存功能，在實際的設計中，完成了對系統(tǒng)組織框架的設計，以圖1為組織框架圖。從圖1當中可以看出Hadoop遙感數(shù)據(jù)系統(tǒng)主要包括業(yè)務表現(xiàn)層級、業(yè)務實現(xiàn)層級、系統(tǒng)支持層級等三個構(gòu)架層，為系統(tǒng)的正常工作做好了基礎工作。

（1）系統(tǒng)的業(yè)務表現(xiàn)層級是系統(tǒng)的操作模塊，其主要包括數(shù)據(jù)入庫、數(shù)據(jù)出庫、數(shù)據(jù)瀏覽、文件管理、權(quán)限管理、用戶管理、任務管理以及日志監(jiān)控等多方面功能完成設計，保證系統(tǒng)工作運行的基礎工作能夠完成。

（2）系統(tǒng)業(yè)務實現(xiàn)層級是系統(tǒng)數(shù)據(jù)模塊傳輸層級，其中Hadoop上的數(shù)據(jù)以及外部的數(shù)據(jù)進行通信傳輸，從而實現(xiàn)整個系統(tǒng)的運行分析，最終完成了Hadoop對系統(tǒng)的有效監(jiān)測。

（3）系統(tǒng)組織構(gòu)架設計過程中，支持層級是系統(tǒng)的核心工作層級，在本系統(tǒng)支持層級設計中，主要設計了以HDFS和HBase作為系統(tǒng)的核心儲存層級[1]。

在實際的系統(tǒng)工作運行過程中，通過系統(tǒng)的核心框架建設保證系統(tǒng)工作運行質(zhì)量更高。另外在整個系統(tǒng)設計中，選擇的HTTP請求接口設計，完成業(yè)務表現(xiàn)層與業(yè)務實現(xiàn)層的連接。