基于Hive和Impala的物流運(yùn)力供應(yīng)鏈數(shù)據(jù)倉庫研究
本文關(guān)鍵詞:基于Hive和Impala的物流運(yùn)力供應(yīng)鏈數(shù)據(jù)倉庫研究
更多相關(guān)文章: Hive Impala 物流運(yùn)力供應(yīng)鏈 海量數(shù)據(jù) 數(shù)據(jù)倉庫
【摘要】:針對(duì)物流行業(yè)中傳統(tǒng)數(shù)據(jù)庫在海量數(shù)據(jù)存儲(chǔ)和交互性查詢方面的不足,提出了基于Hive和Impala物流運(yùn)力供應(yīng)鏈數(shù)據(jù)倉庫的構(gòu)建方法,可以實(shí)現(xiàn)快速查詢。最后搭建阿里云上的PC集群,對(duì)海量供應(yīng)鏈數(shù)據(jù)進(jìn)行查詢分析測(cè)試,表明該數(shù)據(jù)倉庫能滿足海量物流運(yùn)力供應(yīng)鏈數(shù)據(jù)存儲(chǔ)以及查詢方面的需求。
【作者單位】: 四川師范大學(xué)計(jì)算機(jī)與科學(xué)技術(shù)學(xué)院;西南交通大學(xué)交通運(yùn)輸與物流學(xué)院;西南交通大學(xué)信息科學(xué)與技術(shù)學(xué)院;
【關(guān)鍵詞】: Hive Impala 物流運(yùn)力供應(yīng)鏈 海量數(shù)據(jù) 數(shù)據(jù)倉庫
【基金】:四川省科技廳科技支撐項(xiàng)目(2012GZX0090,2014GZX0002)
【分類號(hào)】:TP311.13;F274
【正文快照】: 1引言近年來,隨著物流行業(yè)的不斷發(fā)展與進(jìn)步,運(yùn)力供應(yīng)鏈數(shù)據(jù)信息量急劇增加[1],運(yùn)力供應(yīng)鏈?zhǔn)且粭l從頂端貨主到底端司機(jī)的運(yùn)輸流網(wǎng)絡(luò),中間也存在著很多交互性的合作交易環(huán)節(jié)。海量數(shù)據(jù)存儲(chǔ)和交互性查詢分析使得傳統(tǒng)數(shù)據(jù)庫越來越難適應(yīng)物流行業(yè)信息化的建設(shè)需求。隨著“大數(shù)據(jù)”
【相似文獻(xiàn)】
中國(guó)期刊全文數(shù)據(jù)庫 前10條
1 陶再平,陳奇,俞瑞釗;數(shù)據(jù)倉庫在企業(yè)中應(yīng)用的研究[J];計(jì)算機(jī)工程;2000年07期
2 趙玉源,梁阿磊,白英彩;一種數(shù)據(jù)倉庫聯(lián)機(jī)維護(hù)算法[J];計(jì)算機(jī)工程;2000年08期
3 顏端武,張玉峰;數(shù)據(jù)倉庫的成本效益分析與風(fēng)險(xiǎn)管理研究[J];情報(bào)科學(xué);2000年09期
4 陳建平;數(shù)據(jù)倉庫的管理與使用[J];長(zhǎng)春郵電學(xué)院學(xué)報(bào);2000年03期
5 馬洪江;淺論數(shù)據(jù)倉庫在企業(yè)管理決策支持系統(tǒng)中的應(yīng)用[J];成都大學(xué)學(xué)報(bào)(自然科學(xué)版);2000年03期
6 鄧文華,梅志紅;基于數(shù)據(jù)倉庫的鐵路物資管理決策支持系統(tǒng)的研究[J];華東交通大學(xué)學(xué)報(bào);2000年02期
7 王德軍,鄒永顯;抓住核心 e化銀行[J];上海微型計(jì)算機(jī);2000年48期
8 唐宏,聶能,熊思民,趙明偉;數(shù)據(jù)倉庫實(shí)現(xiàn)技術(shù)[J];數(shù)字通信;2000年08期
9 趙軍,王國(guó)胤,吳中福,李華;數(shù)據(jù)倉庫及其實(shí)現(xiàn)[J];數(shù)字通信;2000年08期
10 秦勉,楊整;數(shù)據(jù)倉庫與銀行利潤(rùn)[J];中國(guó)信用卡;2000年04期
中國(guó)重要會(huì)議論文全文數(shù)據(jù)庫 前10條
1 李潔;李慶忠;王海洋;;一種有效的在線修改數(shù)據(jù)倉庫算法[A];第十六屆全國(guó)數(shù)據(jù)庫學(xué)術(shù)會(huì)議論文集[C];1999年
2 馮建華;蔣旭東;劉建民;周立柱;;面向市場(chǎng)分析與預(yù)測(cè)的數(shù)據(jù)倉庫平臺(tái)[A];第十六屆全國(guó)數(shù)據(jù)庫學(xué)術(shù)會(huì)議論文集[C];1999年
3 王曉玲;謝鴻強(qiáng);劉安;董逸生;;數(shù)據(jù)倉庫建模工具的研制[A];第十七屆全國(guó)數(shù)據(jù)庫學(xué)術(shù)會(huì)議論文集(研究報(bào)告篇)[C];2000年
4 張德輝;李建中;;多維壓縮數(shù)據(jù)倉庫上的并行聚集算法[A];第十七屆全國(guó)數(shù)據(jù)庫學(xué)術(shù)會(huì)議論文集(研究報(bào)告篇)[C];2000年
5 潘海為;李建中;;數(shù)據(jù)倉庫的并行加載算法[A];第十七屆全國(guó)數(shù)據(jù)庫學(xué)術(shù)會(huì)議論文集(研究報(bào)告篇)[C];2000年
6 宋荷慶;胡華;;在證券公司業(yè)務(wù)中建造數(shù)據(jù)倉庫[A];第十八屆全國(guó)數(shù)據(jù)庫學(xué)術(shù)會(huì)議論文集(技術(shù)報(bào)告篇)[C];2001年
7 隋琪;王海洋;;一種基于數(shù)據(jù)倉庫的服務(wù)評(píng)估方法[A];第二十二屆中國(guó)數(shù)據(jù)庫學(xué)術(shù)會(huì)議論文集(技術(shù)報(bào)告篇)[C];2005年
8 宋國(guó)杰;楊冬青;林子雨;唐世渭;王騰蛟;謝昆青;;實(shí)時(shí)主動(dòng)數(shù)據(jù)倉庫的概念、問題及應(yīng)用[A];第二十四屆中國(guó)數(shù)據(jù)庫學(xué)術(shù)會(huì)議論文集(研究報(bào)告篇)[C];2007年
9 杜瀊;宋自林;;虛擬數(shù)據(jù)倉庫的研究與應(yīng)用[A];第十五屆全國(guó)數(shù)據(jù)庫學(xué)術(shù)會(huì)議論文集[C];1998年
10 程永生;樂嘉錦;;數(shù)據(jù)倉庫:數(shù)據(jù)的提取與轉(zhuǎn)化[A];數(shù)據(jù)庫研究進(jìn)展97——第十四屆全國(guó)數(shù)據(jù)庫學(xué)術(shù)會(huì)議論文集(下)[C];1997年
中國(guó)重要報(bào)紙全文數(shù)據(jù)庫 前10條
1 首之;銀行業(yè)數(shù)據(jù)倉庫技術(shù)應(yīng)用亟待起步[N];金融時(shí)報(bào);2005年
2 ;數(shù)據(jù)倉庫解決方案[N];中國(guó)計(jì)算機(jī)報(bào);2002年
3 中國(guó)人民大學(xué)數(shù)據(jù)倉庫與商務(wù)智能工程研究中心 $$ 中國(guó)人民大學(xué)數(shù)據(jù)與知識(shí)工程研究所王珊、謝佳明、陳紅、劉中蔚、邵琦洪、張寧;創(chuàng)建數(shù)據(jù)倉庫:要面向三條路線[N];中國(guó)計(jì)算機(jī)報(bào);2002年
4 IBM 軟件 Barry Devlin 博士;信息集成——數(shù)據(jù)倉庫架構(gòu)的擴(kuò)展[N];中國(guó)計(jì)算機(jī)報(bào);2003年
5 李軍;數(shù)據(jù)倉庫新增長(zhǎng)點(diǎn)在哪里?[N];中國(guó)計(jì)算機(jī)報(bào);2004年
6 段云峰 楊鳳年 宋俊德;數(shù)據(jù)倉庫必不可少[N];計(jì)算機(jī)世界;2002年
7 文武;數(shù)據(jù)倉庫助大鵬轉(zhuǎn)型[N];計(jì)算機(jī)世界;2003年
8 ;數(shù)據(jù)倉庫實(shí)施的“新浪潮”[N];計(jì)算機(jī)世界;2005年
9 本報(bào)記者 侯闖;競(jìng)爭(zhēng)壓力推動(dòng)數(shù)據(jù)倉庫應(yīng)用[N];計(jì)算機(jī)世界;2005年
10 本報(bào)記者 程亮;數(shù)據(jù)倉庫人才緊缺[N];人才市場(chǎng)報(bào);2005年
中國(guó)博士學(xué)位論文全文數(shù)據(jù)庫 前10條
1 宋旭東;企業(yè)集團(tuán)數(shù)據(jù)倉庫系統(tǒng)關(guān)鍵技術(shù)研究[D];大連理工大學(xué);2010年
2 陳燕;數(shù)據(jù)倉庫的設(shè)計(jì)與實(shí)現(xiàn)[D];大連理工大學(xué);2000年
3 栗然;電力負(fù)荷分析與預(yù)測(cè)的分布式數(shù)據(jù)倉庫和數(shù)據(jù)挖掘研究[D];華北電力大學(xué)(河北);2009年
4 李學(xué)鋒;礦山企業(yè)數(shù)據(jù)倉庫的應(yīng)用研究[D];昆明理工大學(xué);2005年
5 馮玉;數(shù)據(jù)倉庫環(huán)境中近似查詢處理技術(shù)研究[D];中國(guó)科學(xué)院研究生院(計(jì)算技術(shù)研究所);2002年
6 馬軍杰;基于數(shù)據(jù)倉庫與聯(lián)機(jī)處理的區(qū)域經(jīng)濟(jì)發(fā)展管理決策支持系統(tǒng)研究[D];華東師范大學(xué);2007年
7 孫劍;海洋環(huán)境數(shù)據(jù)倉庫與數(shù)據(jù)挖掘應(yīng)用研究[D];中國(guó)海洋大學(xué);2011年
8 陳金玉;數(shù)據(jù)倉庫實(shí)體化視圖聯(lián)機(jī)—致性維護(hù)研究[D];重慶大學(xué);2002年
9 趙貴菊;勘探開發(fā)數(shù)據(jù)倉庫的模型研究和應(yīng)用[D];中國(guó)地質(zhì)大學(xué)(北京);2010年
10 朱傳華;三峽庫區(qū)地質(zhì)災(zāi)害數(shù)據(jù)倉庫與數(shù)據(jù)挖掘應(yīng)用研究[D];中國(guó)地質(zhì)大學(xué);2010年
,本文編號(hào):681574
本文鏈接:http://sikaile.net/guanlilunwen/gongyinglianguanli/681574.html