基于Hive架構的物流運力供應鏈數(shù)據倉庫及運力匹配模型優(yōu)化研究
本文關鍵詞:基于Hive架構的物流運力供應鏈數(shù)據倉庫及運力匹配模型優(yōu)化研究
更多相關文章: 物流運力供應鏈 Hive 數(shù)據倉庫 異構數(shù)據 運力匹配
【摘要】:隨著互聯(lián)網和物聯(lián)網的高速發(fā)展,物流行業(yè)中運力供應鏈數(shù)據規(guī)模正在逐漸增大,為了充分利用海量物流運力數(shù)據為物流企業(yè)提供決策支持,從而保障物流運力行業(yè)安全、高效地運行。構建一個強大的分布式數(shù)據倉庫平臺,研究海量物流運力供應鏈數(shù)據存儲和決策應用等方面具有重要的意義。本文針對當前物流運力行業(yè)中傳統(tǒng)數(shù)據庫在海量數(shù)據存儲和提供決策支持等方面的不足,提出了基于Hive架構的物流運力供應鏈數(shù)據倉庫的構建方法。通過對課題聯(lián)合研究的某企業(yè)(以下簡稱企業(yè))中多個應用系統(tǒng)的運力供應鏈數(shù)據分析、整合,實現(xiàn)系統(tǒng)之間運力數(shù)據共享。針對海量運力供應鏈數(shù)據分析和決策需求,設計并優(yōu)化了運力匹配原始模型,通過Hive數(shù)據倉庫為企業(yè)的運力匹配提供決策支持。本文的具體研究工作如下:(1)提出基于Hive架構的物流運力供應鏈數(shù)據倉庫構建方法。運用該方法,在多臺阿里云服務器上搭建完全分布式的Hive數(shù)據倉庫。(2)針對企業(yè)中多個應用系統(tǒng)的異構運力數(shù)據源,通過基于Hive數(shù)據倉庫的整合方式整合多個運力數(shù)據源,將整合后的運力數(shù)據導入數(shù)據倉庫,實現(xiàn)多個系統(tǒng)之間的運力數(shù)據共享。(3)針對企業(yè)中的一個運力調度子系統(tǒng),設計并優(yōu)化了運力匹配模型,結合Hive數(shù)據倉庫可以匹配多個系統(tǒng)之間的車輛信息,同時為企業(yè)運力匹配提供輔助決策依據。(4)結合企業(yè)提供的數(shù)據源以及構建的Hive數(shù)據倉庫,通過數(shù)據對比分析Oracle、Mysql、Impala以及Hive的查詢效率,并實現(xiàn)多源異構運力數(shù)據共享和優(yōu)化后的運力匹配模型。
【學位授予單位】:四川師范大學
【學位級別】:碩士
【學位授予年份】:2016
【分類號】:TP311.13
【相似文獻】
中國期刊全文數(shù)據庫 前10條
1 史金紅,吳永明;影響數(shù)據倉庫成功的關鍵因素[J];電子工程師;2000年01期
2 宋玉長,李本勇,郭小紅;如何構建銀行數(shù)據倉庫[J];上海微型計算機;2000年47期
3 賈納豫;數(shù)據倉庫的概念與機制[J];玉溪師范學院學報;2000年S1期
4 陳京民;數(shù)據倉庫開發(fā)的規(guī)劃研究[J];計算機與網絡;2000年09期
5 楊順生;數(shù)據倉庫鎖緊商業(yè)銀行(上)[J];中國計算機用戶;2000年04期
6 ;數(shù)據倉庫仔細看[J];每周電腦報;2000年10期
7 禾川;;數(shù)據倉庫起熱潮之應用篇[J];每周電腦報;2000年48期
8 楊順生;;中國商業(yè)銀行應實施數(shù)據倉庫[J];金融電子化;2000年03期
9 顧曉姝;;數(shù)據倉庫體系及其實現(xiàn)[J];運城高等?茖W校學報;2000年S1期
10 袁磊,陳長清,馮玉才;數(shù)據倉庫的信息供應鏈模型[J];計算機工程與應用;2001年22期
中國重要會議論文全文數(shù)據庫 前10條
1 陳金雄;劉雄飛;王慶森;;醫(yī)院數(shù)據倉庫的設計與實現(xiàn)[A];首屆中國IT與醫(yī)藥衛(wèi)生高層論壇論文集[C];2004年
2 何朝紅;;數(shù)據倉庫在我國企業(yè)的應用現(xiàn)狀及實施策略分析[A];廣西計算機學會2006年年會論文集[C];2006年
3 劉奇;;腫瘤專業(yè)數(shù)據倉庫的建立[A];第四屆中國腫瘤學術大會暨第五屆海峽兩岸腫瘤學術會議教育集[C];2006年
4 郭遠遠;舒紅平;宮蕊;;基于數(shù)據倉庫的構建和馬爾可夫過程的應用研究[A];2008'中國信息技術與應用學術論壇論文集(二)[C];2008年
5 金周;;基于數(shù)據倉庫的能耗指標查詢體系[A];全國冶金自動化信息網2009年會論文集[C];2009年
6 李潔;李慶忠;王海洋;;一種有效的在線修改數(shù)據倉庫算法[A];第十六屆全國數(shù)據庫學術會議論文集[C];1999年
7 馮建華;蔣旭東;劉建民;周立柱;;面向市場分析與預測的數(shù)據倉庫平臺[A];第十六屆全國數(shù)據庫學術會議論文集[C];1999年
8 王曉玲;謝鴻強;劉安;董逸生;;數(shù)據倉庫建模工具的研制[A];第十七屆全國數(shù)據庫學術會議論文集(研究報告篇)[C];2000年
9 張德輝;李建中;;多維壓縮數(shù)據倉庫上的并行聚集算法[A];第十七屆全國數(shù)據庫學術會議論文集(研究報告篇)[C];2000年
10 潘海為;李建中;;數(shù)據倉庫的并行加載算法[A];第十七屆全國數(shù)據庫學術會議論文集(研究報告篇)[C];2000年
中國重要報紙全文數(shù)據庫 前10條
1 本報記者 于 岫;建設數(shù)據倉庫 打造信息時代的“航母”[N];中國國門時報;2005年
2 莊川 編譯;如何邁出實施數(shù)據倉庫的第一步[N];中國計算機報;2005年
3 本報記者 龔杰;數(shù)據倉庫解決策之惑[N];計算機世界;2004年
4 記者 王璐;上證所建成中國金融業(yè)最大數(shù)據倉庫[N];上海證券報;2005年
5 ;數(shù)據倉庫的歷史[N];中華讀書報;2003年
6 萬振龍;動態(tài)數(shù)據倉庫承接歷史與未來[N];網絡世界;2009年
7 本報記者 薛斐;數(shù)據倉庫沙中淘金[N];計算機世界;2002年
8 本報記者 王向東;“數(shù)據倉庫不是玩酷”[N];計算機世界;2003年
9 本報記者 潘永花;數(shù)據倉庫崢嶸時[N];網絡世界;2003年
10 本報記者 潘永花;數(shù)據倉庫創(chuàng)新與眾不同[N];網絡世界;2010年
中國博士學位論文全文數(shù)據庫 前10條
1 宋旭東;企業(yè)集團數(shù)據倉庫系統(tǒng)關鍵技術研究[D];大連理工大學;2010年
2 陳燕;數(shù)據倉庫的設計與實現(xiàn)[D];大連理工大學;2000年
3 馮玉;數(shù)據倉庫環(huán)境中近似查詢處理技術研究[D];中國科學院研究生院(計算技術研究所);2002年
4 孫劍;海洋環(huán)境數(shù)據倉庫與數(shù)據挖掘應用研究[D];中國海洋大學;2011年
5 栗然;電力負荷分析與預測的分布式數(shù)據倉庫和數(shù)據挖掘研究[D];華北電力大學(河北);2009年
6 李學鋒;礦山企業(yè)數(shù)據倉庫的應用研究[D];昆明理工大學;2005年
7 馬軍杰;基于數(shù)據倉庫與聯(lián)機處理的區(qū)域經濟發(fā)展管理決策支持系統(tǒng)研究[D];華東師范大學;2007年
8 陳金玉;數(shù)據倉庫實體化視圖聯(lián)機—致性維護研究[D];重慶大學;2002年
9 趙貴菊;勘探開發(fā)數(shù)據倉庫的模型研究和應用[D];中國地質大學(北京);2010年
10 朱傳華;三峽庫區(qū)地質災害數(shù)據倉庫與數(shù)據挖掘應用研究[D];中國地質大學;2010年
中國碩士學位論文全文數(shù)據庫 前10條
1 李佳航;基于數(shù)據倉庫的銀行中間業(yè)務系統(tǒng)研究[D];廈門大學;2008年
2 王R,
本文編號:1189417
本文鏈接:http://sikaile.net/guanlilunwen/gongyinglianguanli/1189417.html