本站小編為你精心準(zhǔn)備了大數(shù)據(jù)在測繪地理信息方面的運用參考范文,愿這些范文能點燃您思維的火花,激發(fā)您的寫作靈感。歡迎深入閱讀并收藏。
【摘要】大數(shù)據(jù)也稱之為“BigData”,是隨著計算機技術(shù)發(fā)展而來的一種技術(shù),目前已應(yīng)用于多個行業(yè)的數(shù)據(jù)處理分析中。本文首先概述了大數(shù)據(jù)處理技術(shù),指出了新時代測繪地理信息服務(wù)面臨的新矛盾新問題,重點分析了大數(shù)據(jù)在測繪地理信息方面的應(yīng)用,旨在為相關(guān)工作人員提供參考。
【關(guān)鍵詞】測繪地理信息;大數(shù)據(jù);信息技術(shù);數(shù)據(jù)庫
引言
隨著計算機網(wǎng)絡(luò)技術(shù)的發(fā)展,網(wǎng)絡(luò)信息量、傳輸量猛然增加,對于此類大數(shù)據(jù)的處理而形成為我所用信息的一種處理技術(shù),稱之為大數(shù)據(jù)技術(shù),其具有較強的時代性和應(yīng)用性,目前已經(jīng)在各個領(lǐng)域產(chǎn)生了應(yīng)用效應(yīng)。測繪地理信息技術(shù)也是信息技術(shù)高度發(fā)展背景下產(chǎn)生的,為了滿足人們對于準(zhǔn)確地理信息的需求,使其更好的為人類服務(wù),必須從各個方面對測繪地理信息進行評估,大數(shù)據(jù)在這其中可以大顯身手,基于此筆者專門以此為課題展開研討,以需求為導(dǎo)向,研究探索兩者的結(jié)合部,希望能給相關(guān)專業(yè)人士以參考。
1大數(shù)據(jù)處理技術(shù)概述
(1)以Hadoop為核心的非結(jié)構(gòu)存儲方式可以為檔案管理提供較好的解決方案。其主要優(yōu)點主要體現(xiàn)在以下幾個方面:①成本較低,系統(tǒng)擴容的成本較低,實施時也較為便捷,對于硬件的要求也不高。②支持較大的吞吐量,可以支持高并發(fā)的訪問數(shù)據(jù),可以在超大的數(shù)據(jù)集群中使用,并訪問較大的文件。③具有較好的擴張性,其分布式運算方式,便于計算機實施運算任務(wù),其集簇也可以便捷的擴展至千計節(jié)點,其不僅僅支持文檔、音視頻文件,還可以結(jié)合包含了HIVE與Impala相關(guān)的結(jié)構(gòu)化數(shù)據(jù)庫的HDFS基礎(chǔ)數(shù)據(jù)庫,適時進行數(shù)據(jù)的查詢和更新。
(2)云存儲。也稱之為“云存儲”,作為一種全新的存儲技術(shù),可以通過網(wǎng)絡(luò)技術(shù)和HDFS技術(shù)將網(wǎng)絡(luò)中的很多儲存設(shè)備通過應(yīng)用軟件而共同協(xié)調(diào)工作,一起完成業(yè)務(wù)的訪問和存儲。
(3)知識圖譜。作為一種圖數(shù)據(jù)基礎(chǔ)結(jié)構(gòu),其主要由邊和節(jié)點構(gòu)成,邊主要表示實體之間的關(guān)系,節(jié)點則表現(xiàn)為實施實體存在,這種關(guān)系呈現(xiàn)方式可以有效將不同信息類型連接為一起,形成關(guān)系網(wǎng)絡(luò),以利于實施問題的分析,這一技術(shù)可以較好的應(yīng)用到文檔管理中。
2大數(shù)據(jù)在測繪地理信息工作應(yīng)用的影響
(1)對于部門工作能力是一個有效有力的促進,地理信息數(shù)據(jù)的處理主要依靠測繪地理信息部門,拿中國地理空間框架來說,此基礎(chǔ)地理信息數(shù)據(jù)庫數(shù)據(jù)量非常豐富,相關(guān)的數(shù)據(jù)量達到13.5TB之多,擁有如此之大的數(shù)據(jù)量,對于其利用是一個較大的問題,也直接關(guān)聯(lián)著測繪地理信息部門工作的質(zhì)量,所以做好這部分工作非常重要,只有充分用好這些數(shù)據(jù)才能促進部門建設(shè)和發(fā)展,這對于地理測繪部門的人員提出了新的更高的要求,倒逼其提升自身能力素質(zhì),倒逼新的技術(shù)手段的運用。
(2)構(gòu)建新的工作模式。大數(shù)據(jù)技術(shù)在新時代有許多優(yōu)勢,也為測繪地理信息部門發(fā)展帶來了機遇,創(chuàng)造了條件,為了較好的提升測繪信息利用率,并對其應(yīng)用范圍不斷擴大,必須結(jié)合大數(shù)據(jù)特點,構(gòu)建其完善的信息系統(tǒng),構(gòu)建起全新的工作模式,并對其功能實施優(yōu)化,達到促進云服務(wù)、云計算等領(lǐng)域的高效融合,確保測繪信息相關(guān)作業(yè)符合標(biāo)準(zhǔn)要求。
(3)對測繪地理信息系統(tǒng)實施有效升級。當(dāng)前,測繪地理信息工作還存在很多方面的不足,最主要的原因還是工作性能的掣肘,導(dǎo)致其不能在相對較短的時間內(nèi)精確控制,從而影響其整體應(yīng)用效率,大數(shù)據(jù)由于其各個方面的優(yōu)勢可以促進信息系統(tǒng)的升級,作為測繪部門和相關(guān)企業(yè)要認(rèn)識到此部分系統(tǒng)的重要性,并實施技術(shù)分析,達到不斷優(yōu)化和完善系統(tǒng)的目的,使其更好的滿足實際需要。
3新時代測繪地理信息服務(wù)面臨的新矛盾新問題
隨著信息技術(shù)的發(fā)展,大數(shù)據(jù)技術(shù)已經(jīng)滲透到我們生活工作的方方面面,較好的促進了經(jīng)濟的增長和人民生活水平的提升。在測繪地理信息領(lǐng)域,國家也頒布了相關(guān)的政策,有效的促進了大數(shù)據(jù)技術(shù)在其中的應(yīng)用和發(fā)展,也有效的改善了地理信息服務(wù)的質(zhì)量。但也要看到,新時代新的形勢下測繪地理信息服務(wù)涌現(xiàn)出許多新的技術(shù)手段,人們的生活和工作也需要越來越精準(zhǔn)的服務(wù),需要越來越個性化和智能化的服務(wù),這也是下一步測繪地理信息的發(fā)展方向,顯然對照這一標(biāo)準(zhǔn),差距和挑戰(zhàn)是明顯的。①對于其隨之帶來的弊端還未找到有效對策,比如大數(shù)據(jù)存儲著大量的核心數(shù)據(jù),對于這些地理信息數(shù)據(jù)如何得到有效的安全保障,此類安全隱患目前已經(jīng)逐步顯現(xiàn),此類信息被泄露后還會產(chǎn)生后續(xù)惡性循環(huán),嚴(yán)重影響了信息提供人員的合法權(quán)益。②一些新的采集手段產(chǎn)生了新的數(shù)據(jù),此類數(shù)據(jù)難以成為新的管理模式,也會影響信息服務(wù)的質(zhì)量,進而影響測繪地理信息服務(wù)的使用效率。
4大數(shù)據(jù)在測繪地理信息方面的應(yīng)用
4.1大數(shù)據(jù)在測繪地理信息檔案管理中的應(yīng)用
該技術(shù)主要采取對大量非結(jié)構(gòu)數(shù)據(jù)進行處理,使用HDFS技術(shù)對數(shù)據(jù)實施集中存放,使用Hadoop技術(shù)建設(shè)測繪地理信息檔案資源處理平臺,達到較好提升檔案管理水平的目的。(1)構(gòu)建大數(shù)據(jù)處理平臺。眾所周知,測繪地理信息檔案包含的信息量是非常大的,其不僅僅包含了大量的測繪信息,還包含了大量的航天航空攝影信息,工程測量的信息等等,從存儲信息的格式來看,不僅僅有文字的,還有圖片格式的,甚至還有音頻、視頻格式等非結(jié)構(gòu)化信息,從時間區(qū)分來看,其跨度也很長,有的形成年代久遠,尤其是歷史檔案資料,則其信息化程度就相對較低,就會形成一些非結(jié)構(gòu)數(shù)據(jù)。面對著如此大的數(shù)據(jù)中心,對其檔案實施管理必定面臨諸多的困難,使用大數(shù)據(jù)處理技術(shù)構(gòu)建數(shù)據(jù)處理平臺可以較好的解決這一問題,首先采用HDFS建設(shè)特定的檔案管理群,這一初級階段對于硬件資源要求不高,建設(shè)的節(jié)點可相對較多,一般在50~100節(jié)點之間,節(jié)點的共同工作可以較好的負(fù)責(zé)數(shù)據(jù)的計算和儲存。對于后續(xù)工作,可以依據(jù)管理標(biāo)準(zhǔn)和實際進行節(jié)點的適時擴展,以符合不斷增長的數(shù)據(jù)和計算的要求,接下來就可以采用Hbase數(shù)據(jù)工程對此類非結(jié)構(gòu)化和半結(jié)構(gòu)化的信息數(shù)據(jù)實施處理,使其結(jié)構(gòu)化,并存放于Hadoop數(shù)據(jù)庫,Hive、Hbase技術(shù)的共同運用可以完整的處理結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù),從而構(gòu)建起地理信息檔案大數(shù)據(jù)處理平臺。(2)實現(xiàn)對于相關(guān)數(shù)據(jù)的深入處理。隨著傳感器技術(shù)、激光掃描技術(shù)等測繪技術(shù)和手段的不斷豐富,數(shù)據(jù)可以從很多的途徑實施獲取,其構(gòu)成了大量的數(shù)據(jù)信息,要從這些檔案資源中挖掘出有用信息,靠人工顯然是不可能完成的,必須要依靠技術(shù)手段實施處理,大數(shù)據(jù)處理技術(shù)可以派上用場,大數(shù)據(jù)技術(shù)中數(shù)據(jù)的分析是其核心技術(shù)之一,也是大數(shù)據(jù)發(fā)展的主要方向,這一服務(wù)的關(guān)鍵方式可以對檔案許多異源異構(gòu)的數(shù)據(jù)進行采集、集成和處理分析,并載入系統(tǒng)之中,最后可以運用知識圖譜技術(shù),進行數(shù)據(jù)的引擎搜索,有效提升搜索的質(zhì)量,為客戶提供更為準(zhǔn)確的信息服務(wù)。
4.2大數(shù)據(jù)在構(gòu)建測繪地理信息系統(tǒng)方面的應(yīng)用
當(dāng)前大數(shù)據(jù)影響下海量數(shù)據(jù)在測繪地理信息系統(tǒng)中的利用效率逐漸提高,隨著各種資源的改進,測繪地理信息的實際應(yīng)用范圍不斷擴大,系統(tǒng)的服務(wù)功能不斷地完善,各種測繪地理信息數(shù)據(jù)的挖掘效率逐漸增強,云計算、云服務(wù)等創(chuàng)新模式相互融合的幾率不斷提高,有效保障了地理信息資源利用效率,表1為大數(shù)據(jù)時代某測繪地理信息管理系統(tǒng)性能指標(biāo)。
4.3大數(shù)據(jù)和測繪地理信息在智慧城市建設(shè)中的應(yīng)用
隨著國家城鎮(zhèn)化建設(shè)的不斷推進,城市規(guī)模越來越大,國家提出了智慧城市、海綿城市建設(shè)等一系列城市建設(shè)新理念,給大數(shù)據(jù)在其中的應(yīng)用帶來了很多機遇。隨著移動互聯(lián)網(wǎng)的不斷發(fā)展,位置服務(wù)、物聯(lián)網(wǎng)服務(wù)已經(jīng)走進了商業(yè)服務(wù)的領(lǐng)域,并開始為城市建設(shè)發(fā)展服務(wù),位置服務(wù)信息的優(yōu)勢越來越凸顯,發(fā)揮著越來越重要的作用。通過綜合使用不同類型數(shù)據(jù)和應(yīng)用數(shù)字化地圖,可實現(xiàn)智慧城市的構(gòu)建,促使數(shù)字化城市的發(fā)展達到更高級的級別,形成適合現(xiàn)代城市發(fā)展的新模式。智慧城市與傳統(tǒng)的城市發(fā)展模式相比,最大的特點是可以使所有產(chǎn)業(yè)的經(jīng)營模式和人的生活方式高度智慧化,滿足人們的實際需求。通過不斷整合各種數(shù)據(jù)資源,在傳感器及自動化控制技術(shù)的支持下,充分利用地理位置數(shù)據(jù),建立符合智慧城市發(fā)展要求的新模式,實現(xiàn)大數(shù)據(jù)的深層次應(yīng)用和挖掘。
5結(jié)語
測繪地理信息在新時代出現(xiàn)了許多新的特征,要使其應(yīng)用價值不斷提升,采用大數(shù)據(jù)技術(shù)是大勢所趨,其不僅僅可以滿足人類活動不斷拓展的需要,也全面提升了地理信息服務(wù)的質(zhì)量和效率,這就需要有全新的信息大數(shù)據(jù)處理平臺作為支撐,就必須要求測繪地理信息部門擁有全新的工作模式,從傳統(tǒng)的數(shù)據(jù)處理模式中解脫出來。同時在理念上,也要進一步認(rèn)識到,隨著大數(shù)據(jù)時代來臨,人們比以往任何時候都需要地理信息,這也是其價值和發(fā)展意義之所在。
參考文獻
[1]杜偉.大數(shù)據(jù)及其對測繪地理信息工作的啟示[J].低碳世界,2016,30:104~105.
[2]施小溪.大數(shù)據(jù)處理技術(shù)在測繪地理信息檔案管理中的應(yīng)用[J].辦公室業(yè)務(wù),2017,09:103.
[3]羊冠耀.大數(shù)據(jù)時代測繪地理信息服務(wù)面臨的機遇與挑戰(zhàn)[J].住宅與房地產(chǎn),2017,11:192.
作者:萬學(xué)鑫 單位:柳州市勘察測繪研究院