陳長(zhǎng)燕
摘要:由于傳統(tǒng)技術(shù)無(wú)法滿足目前地理信息前沿科技的要求,因此探索大數(shù)據(jù)技術(shù)在測(cè)繪地理信息中的合理應(yīng)用,對(duì)推進(jìn)測(cè)繪地理信息技術(shù)的發(fā)展具有重要意義。關(guān)鍵詞:大數(shù)據(jù)技術(shù);測(cè)繪地理信息;應(yīng)用對(duì)策
大數(shù)據(jù)技術(shù)的廣泛應(yīng)用,在很多領(lǐng)域具有非常重要的影響。當(dāng)前,信息獲取的手段越來(lái)越豐富,信息量也越來(lái)越大,對(duì)整個(gè)社會(huì)的發(fā)展具有一定的推動(dòng)作用。但對(duì)信息科學(xué)合理的應(yīng)用和有效儲(chǔ)存、管理也是目前各行業(yè)需要著重思考的問(wèn)題。大數(shù)據(jù)技術(shù)在具體應(yīng)用中,為諸多領(lǐng)域提供了可靠的發(fā)展空間,測(cè)繪地理信息不僅有利于經(jīng)濟(jì)建設(shè),而且有利于推動(dòng)社會(huì)發(fā)展,因此,要保證測(cè)繪地理信息的準(zhǔn)確性、可靠性,就要認(rèn)識(shí)到大數(shù)據(jù)技術(shù)應(yīng)用的必要性。
1 ?測(cè)繪地理信息發(fā)展現(xiàn)狀及現(xiàn)存問(wèn)題
1.1 ?測(cè)繪地理信息發(fā)展現(xiàn)狀
近年來(lái),經(jīng)濟(jì)發(fā)展水平不斷提升,各種先進(jìn)技術(shù)在各領(lǐng)域中的應(yīng)用相對(duì)比較廣。3S技術(shù)的應(yīng)用,實(shí)現(xiàn)了對(duì)傳統(tǒng)測(cè)繪技術(shù)的改進(jìn)和優(yōu)化,推動(dòng)了測(cè)繪地理行業(yè)的信息化建設(shè)和發(fā)展。與此同時(shí),測(cè)繪的生產(chǎn)主體模式也逐漸發(fā)生了根本性的變化,大量外業(yè)測(cè)量工作在具體開展中被業(yè)內(nèi)的地理信息處理逐漸取代。可見,測(cè)繪地理信息服務(wù)范圍在不斷擴(kuò)大。
1.2 測(cè)繪地理信息存在的問(wèn)題
測(cè)繪地理行業(yè)中,傳統(tǒng)技術(shù)應(yīng)用效率、測(cè)繪結(jié)果無(wú)法滿足實(shí)際要求。針對(duì)目前存在的各種問(wèn)題,提出針對(duì)性的解決對(duì)策,以此來(lái)保證測(cè)繪地理信息的準(zhǔn)確性、有效性。1)測(cè)繪地理信息通常會(huì)被采集到各種不同類型的傳感器中,以此來(lái)實(shí)現(xiàn)快速合理的獲取和應(yīng)用。通過(guò)靜態(tài)空間的數(shù)據(jù)方式,逐漸轉(zhuǎn)變成動(dòng)態(tài)化的時(shí)空信息,特別是在當(dāng)前物聯(lián)網(wǎng)時(shí)代背景下,無(wú)論是數(shù)據(jù)獲取還是在生產(chǎn)方式等方面,都已經(jīng)呈現(xiàn)出明顯的變化趨勢(shì)。直接造成數(shù)據(jù)量越來(lái)越大,雖然計(jì)算機(jī)硬件以及對(duì)應(yīng)的儲(chǔ)存設(shè)備在實(shí)際應(yīng)用中也在不斷提升,但還是無(wú)法滿足數(shù)據(jù)管理以及儲(chǔ)存各方面的需求。2)不同類型的先進(jìn)技術(shù)手段在很多領(lǐng)域中被挖掘和利用,包括高分衛(wèi)星遙感技術(shù)、激光雷達(dá)等各種不同類型的技術(shù)手段。由于目前測(cè)繪地理信息對(duì)信息數(shù)據(jù)質(zhì)量的要求在不斷提升,數(shù)據(jù)種類也在逐漸朝著多樣化的趨勢(shì)發(fā)展,大量的人工作業(yè)模式也逐漸朝著自動(dòng)化的趨勢(shì)發(fā)展。此時(shí),計(jì)算機(jī)在各項(xiàng)業(yè)務(wù)的具體處理方面經(jīng)常會(huì)出現(xiàn)嚴(yán)重不協(xié)調(diào)的問(wèn)題。在現(xiàn)代化社會(huì)發(fā)展背景下,對(duì)各種不同類型的信息產(chǎn)品提出的需求非常大。測(cè)繪地理信息的服務(wù)范圍也在不斷擴(kuò)大,導(dǎo)致邊緣模糊狀態(tài)比較嚴(yán)重,甚至還會(huì)引起跨界[1]問(wèn)題 。這種形勢(shì)下如果一直沿用傳統(tǒng)的測(cè)繪技術(shù)、測(cè)繪成果,很難滿足現(xiàn)代化社會(huì)發(fā)展的個(gè)性化需求。測(cè)繪地理信息數(shù)據(jù)的產(chǎn)生、收集以及應(yīng)用,要能夠體現(xiàn)全局性的特征,所以對(duì)數(shù)據(jù)實(shí)時(shí)有效的分析和處理能力提出了更高的要求。
2 ?測(cè)繪地理信息中對(duì)大數(shù)據(jù)技術(shù)的合理應(yīng)用
信息社會(huì)對(duì)大數(shù)據(jù)技術(shù)提出的要求越來(lái)越高,對(duì)各種不同類型的海量數(shù)據(jù)展開科學(xué)合理的儲(chǔ)存、管理以及計(jì)算,都是比較常見的處理手段。在實(shí)踐中,針對(duì)各種不同類型的數(shù)據(jù)信息展開處理時(shí),通常情況下需要利用TB級(jí)或者更大量級(jí)的數(shù)據(jù)進(jìn)行妥善處理,這些都是傳統(tǒng)數(shù)據(jù)處理技術(shù)根本無(wú)法完成的任務(wù)。大數(shù)據(jù)技術(shù)在實(shí)際應(yīng)用中,會(huì)涉及分布式計(jì)算等,打破了測(cè)繪地理信息的發(fā)展瓶頸。
2.1 ?地理信息數(shù)據(jù)的儲(chǔ)存和管理
大數(shù)據(jù)時(shí)代背景下,大數(shù)據(jù)技術(shù)實(shí)踐中應(yīng)用地理信息數(shù)據(jù)涉及到的內(nèi)容有很多,不僅涉及到各種不同類型的圖形、數(shù)據(jù)庫(kù)等具有結(jié)構(gòu)化特征的數(shù)據(jù)內(nèi)容,而且還涉及文檔內(nèi)容、表格等具有非結(jié)構(gòu)化特征的數(shù)據(jù)信息。針對(duì)結(jié)構(gòu)化特征的數(shù)據(jù)進(jìn)行處理時(shí),要構(gòu)建數(shù)據(jù)處理平臺(tái),對(duì)數(shù)據(jù)進(jìn)行分類管理,以此來(lái)達(dá)到良好的處理效果。在這一基礎(chǔ)上,可以通過(guò)Hadoop分布式的處理平臺(tái)作為基礎(chǔ),對(duì)HDFS進(jìn)行科學(xué)合理的應(yīng)用,有利于實(shí)現(xiàn)數(shù)據(jù)集群的合理構(gòu)建。數(shù)據(jù)管理集群的節(jié)點(diǎn)數(shù)量通常情況下可以直接與現(xiàn)有的數(shù)據(jù)量規(guī)模、近期的需求情況等進(jìn)行科學(xué)合理的配置,以此為基礎(chǔ),有利于實(shí)現(xiàn)所有節(jié)點(diǎn)協(xié)同工作的集中化處理,以此來(lái)保證各項(xiàng)數(shù)據(jù)信息的儲(chǔ)存、計(jì)算等各項(xiàng)工作真[2]正落到實(shí)處 。與此同時(shí),可以通過(guò)對(duì)Hbase數(shù)據(jù)工廠的科學(xué)合理應(yīng)用,實(shí)現(xiàn)對(duì)大量半結(jié)構(gòu)化、各種非結(jié)構(gòu)化數(shù)據(jù)的針對(duì)性的分析和處理。針對(duì)已經(jīng)生成結(jié)構(gòu)化的數(shù)據(jù),可以直接儲(chǔ)存到對(duì)應(yīng)的Hadoop數(shù)據(jù)庫(kù)中,以此來(lái)保證數(shù)據(jù)信息的合理性、可靠性以及安全性。除此之外,要對(duì)Hive的數(shù)據(jù)倉(cāng)庫(kù)展開科學(xué)合理的布設(shè)和應(yīng)用,該數(shù)據(jù)倉(cāng)庫(kù)的設(shè)置目[3]的就是為了實(shí)現(xiàn)對(duì)結(jié)構(gòu)化數(shù)據(jù)合理的管理和控制 。由此可以看出,Hive、Hbase在實(shí)踐中的聯(lián)合式應(yīng)用,有利于實(shí)現(xiàn)結(jié)構(gòu)化、非結(jié)構(gòu)化這兩種不同類型地理信息數(shù)據(jù)的集群式管理,同時(shí)還可以保證儲(chǔ)存的可靠性。最后,通過(guò)對(duì)MapReduce的應(yīng)用,實(shí)現(xiàn)分布式的計(jì)算和分析,通過(guò)Hadoop集群當(dāng)中的并行計(jì)算方式,實(shí)現(xiàn)對(duì)現(xiàn)有大量數(shù)據(jù)針對(duì)性的處理。在此基礎(chǔ)上,有利于形成一個(gè)基礎(chǔ)的框架模式,以此來(lái)保證地理信息檔案對(duì)應(yīng)的大數(shù)據(jù)處理平臺(tái)能夠得到合理構(gòu)建和落實(shí)。
2.2 ?測(cè)繪地理信息時(shí)空數(shù)據(jù)的運(yùn)算和處理
計(jì)算機(jī)技術(shù)在實(shí)際應(yīng)用中整體處理能力普遍有所提升,間接為測(cè)繪地理信息的效率、質(zhì)量提升提供了保證。大數(shù)據(jù)分布處理技術(shù)在具體應(yīng)用中最為明顯的優(yōu)勢(shì)是可以實(shí)現(xiàn)對(duì)大規(guī)模數(shù)據(jù)的批量化處理,處理速度相對(duì)比較快。無(wú)論是圖結(jié)構(gòu)數(shù)據(jù)的圖計(jì)算,還是全局?jǐn)?shù)據(jù)的查詢和計(jì)算分析等,不同類型結(jié)構(gòu)地理信息數(shù)據(jù)的應(yīng)用,有利于工作效率和質(zhì)量提升 。
3 ?結(jié)語(yǔ)
大數(shù)據(jù)時(shí)代背景下大數(shù)據(jù)技術(shù)的引進(jìn)和應(yīng)用,對(duì)測(cè)繪地理信息工作的展開具有非常重要的影響。大數(shù)據(jù)技術(shù)的應(yīng)用,不僅有利于實(shí)現(xiàn)對(duì)測(cè)繪地理信息各種海量數(shù)據(jù)儲(chǔ)存、處理以及分析和管理等問(wèn)題的妥善處理,而且有利于保證各種不同類型數(shù)據(jù)信息處理效率和質(zhì)量的提升。在保證自身分析能力、服務(wù)水平提升的同時(shí),推動(dòng)地理信息行業(yè)穩(wěn)定、高質(zhì)量發(fā)展,滿足時(shí)代提出的個(gè)性化需求。
參考文獻(xiàn):
[1] ?鄔明權(quán),王標(biāo)才,牛錚,黃文江.工程項(xiàng)目地球大數(shù)據(jù)監(jiān)測(cè) ? ? 與分析理論框架及研究進(jìn)展[J].地球信息科學(xué)學(xué)報(bào), ? ? 2020,22(07):1408-1423.
[2] ?黃軍政.大數(shù)據(jù)及其對(duì)測(cè)繪地理信息工作的啟示[J].工 ? ? 程建設(shè)與設(shè)計(jì),2020(12):245-246.
[3] ?羅國(guó)輝,黃斌.研究大數(shù)據(jù)時(shí)代測(cè)繪地理信息服務(wù)面臨 ? ? 的機(jī)遇與挑戰(zhàn)[J].居舍,2019(01):175