基于Hadoop的道路匹配算法研究
本文關鍵詞:基于Hadoop的道路匹配算法研究
更多相關文章: 并行計算 Hadoop 數(shù)據(jù)壓縮 道路匹配
【摘要】:隨著城市道路交通的快速發(fā)展與車輛數(shù)量的快速增長和之相關的交通數(shù)據(jù)量呈現(xiàn)的幾何級數(shù)的增長,對于車輛相關數(shù)據(jù)的處理的準確性、可靠性和實時性都提出了更高的要求。當前針對車輛數(shù)據(jù)處理算法的研究多是以較短時間間隔的小樣本數(shù)據(jù)為基礎,相對缺乏對較長時間間隔數(shù)據(jù)的匹配算法。同時現(xiàn)有的數(shù)據(jù)庫管理技術(shù)已經(jīng)難以滿足對日益增長的海量浮動車數(shù)據(jù)管理和應用的需求。針對這些問題,本文提出了一種基于Hadoop的實現(xiàn)大樣本浮動車GPS數(shù)據(jù)處理的地圖匹配算法。論文的主要研究工作如下:1)通過對現(xiàn)有非關系型數(shù)據(jù)庫和傳統(tǒng)的關系型數(shù)據(jù)庫的數(shù)據(jù)組織方式和應用范圍的比較,指出了非關系型數(shù)據(jù)庫對于管理海量數(shù)據(jù)存在的優(yōu)勢與不足,研究學了Hadoop各組成部分的具體功能、基本原理,重點學了MapReduce編程思想和分布式處理流程,為下面的研究奠定理論基礎。2)按照車輛定位點與道路的幾何關系進行分類,對各類典型的地圖道路匹配算法進行了回顧,介紹了現(xiàn)有的大樣本車輛數(shù)據(jù)地圖匹配算法的實現(xiàn)方式,指出了將云計算應用于地圖道路匹配的必要性以及當前研究中存在的問題。3)利用并改進現(xiàn)有的道路壓縮方法來實現(xiàn)道路數(shù)據(jù)的預處理,詳細的分析了空間因素(包括角度、距離、連通性、時間因素如上傳間隔、行駛速度等)和歷史匹配結(jié)果對匹配結(jié)果的影響,改進了時間因素的計算方式,給出了一種基于匹配度反饋的地圖道路匹配算法,并針對適用于Hadoop的并行計算對該匹配算法進行了優(yōu)化處理。4)利用虛擬機搭建了實驗Hadoop平臺,對本文提出的基于匹配度反饋的道路匹配算法進行了仿真實驗,分別從匹配效果、算法執(zhí)行效率、對平臺的適用度等幾個方面進行了驗證。通過實驗對比該算法匹配前后車輛位置的變化證明采用該匹配算法實現(xiàn)較長時間間隔定位數(shù)據(jù)道路匹配的可行性和有效性。
【關鍵詞】:并行計算 Hadoop 數(shù)據(jù)壓縮 道路匹配
【學位授予單位】:南京郵電大學
【學位級別】:碩士
【學位授予年份】:2016
【分類號】:U495;TP311.13
【目錄】:
- 摘要4-5
- Abstract5-8
- 第一章 緒論8-14
- 1.1 論文研究的背景與意義8-10
- 1.2 國內(nèi)外研究現(xiàn)狀10-12
- 1.2.1 云計算10-11
- 1.2.2 道路匹配11-12
- 1.3 論文的主要研究內(nèi)容12-13
- 1.4 論文的組織結(jié)構(gòu)13-14
- 第二章 Hadoop相關技術(shù)介紹14-22
- 2.1 HDFS介紹14-15
- 2.2 MapReduce15-18
- 2.2.1 MapReduce編程思想15-17
- 2.2.2 MapReduce處理流程17-18
- 2.3 HBase介紹18-20
- 2.3.1 HBase數(shù)據(jù)模型18-20
- 2.3.2 HBase與關系型數(shù)據(jù)庫的異同20
- 2.4 本章小結(jié)20-22
- 第三章 道路匹配介紹22-30
- 3.1 道路匹配的原理22
- 3.2 常用的道路匹配算法22-28
- 3.2.1 幾何匹配算法22-24
- 3.2.2 基于路網(wǎng)拓撲關系的匹配算法24
- 3.2.3 基于概率統(tǒng)計的匹配算法24-25
- 3.2.4 基于模糊邏輯的匹配算法25-27
- 3.2.5 相關性匹配算法27-28
- 3.2.6 基于模式識別的匹配算法28
- 3.2.7 基于代價函數(shù)的匹配算法28
- 3.3 各匹配算法的對比28-29
- 3.4 本章小節(jié)29-30
- 第四章 基于匹配度反饋的道路匹配算法30-53
- 4.1 相關定義表述30-32
- 4.2 道路數(shù)據(jù)的壓縮處理32-39
- 4.2.1 基于角度約束的道路數(shù)據(jù)壓縮32-38
- 4.2.2 路段方位角的計算38-39
- 4.3 道路匹配的判別因素39-45
- 4.3.1 空間因素39-42
- 4.3.2 時間因素42-44
- 4.3.3 匹配度反饋44-45
- 4.4 基于匹配度反饋的道路匹配算法45-51
- 4.4.1 時空分析45-47
- 4.4.2 基于匹配度反饋的匹配算法47-50
- 4.4.3 算法優(yōu)化50-51
- 4.5 本意小節(jié)51-53
- 第五章 實驗與分析53-62
- 5.1 實驗環(huán)境53-54
- 5.1.1 硬件環(huán)境53-54
- 5.1.2 軟件環(huán)境54
- 5.2 基于匹配度反饋的算法的實驗與分析54-61
- 5.2.1 道路預處理54-55
- 5.2.2 地圖匹配驗證55-61
- 5.3 本章小結(jié)61-62
- 第六章 總結(jié)與展望62-64
- 6.1 總結(jié)62-63
- 6.2 展望63-64
- 參考文獻64-67
- 致謝67
【相似文獻】
中國期刊全文數(shù)據(jù)庫 前10條
1 俞慈君;李江雄;余鋒杰;柯映林;秦龍剛;陳學良;楊衛(wèi)東;宋承志;;帶工程約束的點匹配算法[J];機械工程學報;2010年05期
2 黃廉真;吳曉軍;康文雄;;一種新的高速圓形匹配算法[J];哈爾濱工業(yè)大學學報;2012年07期
3 鄒志文;李橋;王政輝;費洪哲;;基于訂閱劃分的多維索引并行匹配算法[J];華中科技大學學報(自然科學版);2013年S2期
4 陳志剛;宋勝鋒;李陸冀;包磊;;基于相似原理的點特征松弛匹配算法[J];火力與指揮控制;2006年01期
5 王寬全,李小榮,李仲榮;活動目標跟蹤中的一種自適應分割及匹配算法[J];機器人;1987年05期
6 胡昔祥;;基于語義的發(fā)布訂閱系統(tǒng)匹配算法研究[J];浙江大學學報(工學版);2009年01期
7 黃曉穎;童余德;邊少鋒;;一種新的實時相關極值匹配算法設計與仿真[J];中國慣性技術(shù)學報;2012年04期
8 任世宏;圖像實時匹配算法的研究[J];北京理工大學學報;1992年03期
9 曹菲,楊小岡,繆棟,張云鵬;快速景象匹配算法控制策略[J];導彈與航天運載技術(shù);2005年03期
10 陳凱;魯浩;趙剛;閆杰;;傳遞對準姿態(tài)匹配算法的統(tǒng)一性[J];中國慣性技術(shù)學報;2008年02期
中國重要會議論文全文數(shù)據(jù)庫 前10條
1 王翠茹;高麗鮮;;發(fā)布訂閱系統(tǒng)中匹配算法的研究[A];全國第20屆計算機技術(shù)與應用學術(shù)會議(CACIS·2009)暨全國第1屆安全關鍵技術(shù)與應用學術(shù)會議論文集(上冊)[C];2009年
2 杜云峰;許娜;孫爽;許立永;董彥榮;;一種基于排除的串匹配算法[A];2007北京地區(qū)高校研究生學術(shù)交流會通信與信息技術(shù)會議論文集(上冊)[C];2008年
3 郭莉;劉燕兵;譚建龍;;基于存儲壓縮的多模式串匹配算法[A];全國第八屆計算語言學聯(lián)合學術(shù)會議(JSCL-2005)論文集[C];2005年
4 姚辰松;魯昌華;;指紋匹配算法的研究[A];全國第19屆計算機技術(shù)與應用(CACIS)學術(shù)會議論文集(上冊)[C];2008年
5 宣琦;吳鐵軍;;復雜網(wǎng)絡間節(jié)點匹配算法研究[A];2009年第五屆全國網(wǎng)絡科學論壇論文集[C];2009年
6 龔才春;黃玉蘭;許洪波;白碩;;基于多重索引模型的大規(guī)模詞典近似匹配算法[A];第三屆全國信息檢索與內(nèi)容安全學術(shù)會議論文集[C];2007年
7 林雪娥;楊鑒;熊艷嬌;劉懷憬;李詩心;胡湘興;;基于拼寫規(guī)則和最大匹配算法的泰語分詞[A];第十二屆全國人機語音通訊學術(shù)會議(NCMMSC'2013)論文集[C];2013年
8 李曉雷;黃新生;王亦平;徐婉瑩;;穩(wěn)健快速的匹配算法研究[A];'2008系統(tǒng)仿真技術(shù)及其應用學術(shù)會議論文集[C];2008年
9 姚益平;盧錫城;;基于移動相交信息的動態(tài)區(qū)域匹配算法[A];仿真計算機與軟件、仿真方法與建模學術(shù)交流會論文集[C];2004年
10 楊靚;黃巾;盧強;黃士坦;;基于全息相關系數(shù)矩陣的匹配算法[A];第十一屆全國信號處理學術(shù)年會(CCSP-2003)論文集[C];2003年
中國博士學位論文全文數(shù)據(jù)庫 前4條
1 錢詩友;大規(guī)模發(fā)布/訂閱系統(tǒng)匹配算法研究[D];上海交通大學;2015年
2 楊容浩;無控制DEM匹配算法性能比較與改進研究[D];西南交通大學;2012年
3 郭克華;基于微分幾何的局部相似目標匹配算法研究[D];南京理工大學;2008年
4 汪錦嶺;面向Internet的發(fā)布/訂閱系統(tǒng)的關鍵技術(shù)研究[D];中國科學院研究生院(軟件研究所);2005年
中國碩士學位論文全文數(shù)據(jù)庫 前10條
1 劉芳萍;基于特征匹配的雙目立體圖像深度提取算法研究[D];上海師范大學;2015年
2 楊騰飛;SIFT匹配算法在遙感影像平面精度評定中的應用[D];昆明理工大學;2015年
3 戴昕;高效子圖匹配算法研究[D];北京交通大學;2016年
4 王益國;高校教師多維關系挖掘與應用[D];中國海洋大學;2015年
5 高銳軍;基于力圖投影與重疊度的空間數(shù)據(jù)匹配算法研究[D];太原理工大學;2016年
6 楊林杰;基于輪廓特征的目標匹配算法研究[D];湖北工業(yè)大學;2016年
7 于力;水下運載體重力匹配算法研究[D];北京理工大學;2016年
8 王昆侖;基于高斯牛頓法的DEM匹配算法[D];西南交通大學;2016年
9 周常勇;基于移動信令數(shù)據(jù)的城市交通出行軌跡匹配技術(shù)[D];西南交通大學;2016年
10 王田;基于高斯混合模型的快速相干點漂移點集匹配算法[D];中原工學院;2016年
,本文編號:1033719
本文鏈接:http://sikaile.net/kejilunwen/daoluqiaoliang/1033719.html