本文關(guān)鍵詞：基于Hadoop的海運(yùn)業(yè)分布式搜索引擎的應(yīng)用研究

  更多相關(guān)文章： 海運(yùn)業(yè) Hadoop Map/Reduce 分布式文件系統(tǒng) 搜索引擎

【摘要】：針對海運(yùn)業(yè)務(wù)系統(tǒng)越來越復(fù)雜,區(qū)域間數(shù)據(jù)交換日益頻繁,致使海運(yùn)企業(yè)無法高效、穩(wěn)定地使用傳統(tǒng)體系處理業(yè)務(wù)信息的問題,采用Map/Reduce分布式計(jì)算模型以及分布式文件系統(tǒng),設(shè)計(jì)了一個(gè)基于Hadoop的分布式搜索引擎.該搜索引擎能夠使海運(yùn)企業(yè)在合理時(shí)間內(nèi)獲取、管理、處理業(yè)務(wù)信息.通過該分布式搜索引擎,可以高效、穩(wěn)定地滿足海運(yùn)企業(yè)日益繁重的龐大的業(yè)務(wù)需求.
【作者單位】： 西安工程大學(xué)計(jì)算機(jī)科學(xué)學(xué)院;西安西翼智能科技有限公司;
【基金】：國家科技支援計(jì)劃資助項(xiàng)目(2006BAF01A44) 中國紡織工業(yè)協(xié)會(huì)科技指導(dǎo)性資助項(xiàng)目(2010076) 陜西省教育廳專項(xiàng)科研計(jì)劃資助項(xiàng)目(12JK0931,12JK0947) 西安工程大學(xué)基礎(chǔ)研究資助項(xiàng)目(XGJ07008)
【分類號(hào)】：TP391.3
【正文快照】： 搜索引擎的產(chǎn)生和發(fā)展,與互聯(lián)網(wǎng)的蓬勃發(fā)展密不可分.目前,幾大通用搜索引擎,如Baidu、Google、360等已經(jīng)牢牢控制了搜索引擎市場.Google每天需要處理海量數(shù)據(jù)和復(fù)雜計(jì)算,在保證系統(tǒng)延展性和良好運(yùn)行效率的基礎(chǔ)上,都可以通過架構(gòu)在廉價(jià)集群之上的云計(jì)算平臺(tái)得以實(shí)現(xiàn)[1].但中小

【參考文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前2條

1 吳寶貴;丁振國;;基于Map/Reduce的分布式搜索引擎研究[J];現(xiàn)代圖書情報(bào)技術(shù);2007年08期

2 劉書華;焦林;;基于云計(jì)算的汽車車牌自動(dòng)識(shí)別系統(tǒng)[J];西安工程大學(xué)學(xué)報(bào);2013年03期

中國博士學(xué)位論文全文數(shù)據(jù)庫 前1條

1 陳旭毅;基于索引云的企業(yè)搜索引擎實(shí)現(xiàn)研究[D];武漢大學(xué);2011年

【共引文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前10條

1 陳軍;盧涵宇;姚丹丹;;一種基于處理時(shí)間的Map/Reduce動(dòng)態(tài)均衡調(diào)度算法[J];江西師范大學(xué)學(xué)報(bào)(自然科學(xué)版);2013年01期

2 李萍;;基于Hadoop的K—Means聚類算法在高校圖書館工作中的應(yīng)用研究[J];大學(xué)圖書情報(bào)學(xué)刊;2014年05期

3 劉興強(qiáng);楊桃;范云琳;陳婷婷;閆自金;宋紹云;;內(nèi)網(wǎng)搜索引擎算法的分析與研究[J];電腦知識(shí)與技術(shù);2014年01期

4 魏爽;;基于云計(jì)算的大規(guī)模網(wǎng)頁日志挖掘研究[J];電腦知識(shí)與技術(shù);2014年28期

5 李成華;張新訪;金海;向文;;MapReduce:新型的分布式并行計(jì)算編程模型[J];計(jì)算機(jī)工程與科學(xué);2011年03期

6 陸小麗;何加銘;;基于Map/Reduce的索引數(shù)據(jù)云存儲(chǔ)模型研究[J];寧波大學(xué)學(xué)報(bào)(理工版);2011年03期

7 方少卿;周劍;張明新;;基于Map/Reduce的改進(jìn)選擇算法在云計(jì)算的Web數(shù)據(jù)挖掘中的研究[J];計(jì)算機(jī)應(yīng)用研究;2013年02期

8 欒景超;馬志強(qiáng);李昊u&;董科軍;;Hadoop分布式文件系統(tǒng)資源管理器的設(shè)計(jì)與實(shí)現(xiàn)[J];科研信息化技術(shù)與應(yīng)用;2014年01期

9 孫想;吳華瑞;李慶學(xué);;農(nóng)業(yè)海量信息資源管理平臺(tái)設(shè)計(jì)與實(shí)現(xiàn)[J];計(jì)算機(jī)應(yīng)用與軟件;2015年03期

10 朱維喬;;面向大數(shù)據(jù)的機(jī)構(gòu)知識(shí)庫構(gòu)建模式創(chuàng)新研究[J];圖書館學(xué)研究;2014年13期

中國重要會(huì)議論文全文數(shù)據(jù)庫 前1條

1 王斌;;移動(dòng)互聯(lián)網(wǎng)定位技術(shù)分析及融合方式探討[A];2012全國無線及移動(dòng)通信學(xué)術(shù)大會(huì)論文集（下）[C];2012年

中國博士學(xué)位論文全文數(shù)據(jù)庫 前3條

1 陳旭毅;基于索引云的企業(yè)搜索引擎實(shí)現(xiàn)研究[D];武漢大學(xué);2011年

2 劉佐達(dá);分布協(xié)作式搜索引擎模型及算法研究[D];清華大學(xué);2011年

3 陳軍;基于G/S模式的空間分析云服務(wù)關(guān)鍵技術(shù)研究[D];成都理工大學(xué);2012年

中國碩士學(xué)位論文全文數(shù)據(jù)庫 前10條

1 凌辰;基于Web服務(wù)器遠(yuǎn)程無縫遷移技術(shù)的研究與應(yīng)用[D];天津理工大學(xué);2010年

2 么士宇;基于分布式計(jì)算的網(wǎng)絡(luò)爬蟲技術(shù)研究[D];大連海事大學(xué);2011年

3 魚健榕;基于Nutch的搜索引擎系統(tǒng)的研究與實(shí)現(xiàn)[D];北京郵電大學(xué);2011年

4 施巖;云計(jì)算研究及Hadoop應(yīng)用程序的開發(fā)與測試[D];北京郵電大學(xué);2011年

5 文軍艦;基于Nutch的Web結(jié)構(gòu)挖掘算法研究[D];天津財(cái)經(jīng)大學(xué);2011年

6 楊麗婷;基于云計(jì)算數(shù)據(jù)存儲(chǔ)技術(shù)的研究[D];中北大學(xué);2011年

7 董長春;基于Hadoop的倒排索引技術(shù)的研究[D];遼寧大學(xué);2011年

8 曹挹芬;分布式文件存儲(chǔ)與檢索平臺(tái)的設(shè)計(jì)與實(shí)現(xiàn)[D];湖南大學(xué);2009年

9 張文峰;基于MapReduce模型的分布式計(jì)算平臺(tái)的原理與設(shè)計(jì)[D];華中科技大學(xué);2010年

10 盤隆;基于MapReduce的分布式編程框架的設(shè)計(jì)與實(shí)現(xiàn)[D];哈爾濱工業(yè)大學(xué);2011年

【二級(jí)參考文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前10條

1 胡慶華;Web搜索引擎中Mobile Agent動(dòng)態(tài)路由問題研究[J];安徽大學(xué)學(xué)報(bào)(自然科學(xué)版);2003年03期

2 陳德禮;;基于JXTA的層次性P2P搜索引擎框架的研究與設(shè)計(jì)[J];重慶工學(xué)院學(xué)報(bào)(自然科學(xué)版);2007年07期

3 賴祖龍;萬幼川;申邵洪;徐景中;;基于Hilbert排列碼與R樹的海量LIDAR點(diǎn)云索引[J];測繪科學(xué);2009年06期

4 曾韜;應(yīng)用非結(jié)構(gòu)化信息管理技術(shù)實(shí)現(xiàn)多層次知識(shí)管理需求[J];中國傳媒科技;2004年06期

5 劉必雄,蔡建兵;當(dāng)前分布式計(jì)算解決方案簡介[J];重慶科技學(xué)院學(xué)報(bào);2005年01期

6 李光雷;張世祿;;云計(jì)算在資料查詢中的應(yīng)用初探[J];大連大學(xué)學(xué)報(bào);2009年06期

7 武曉娟;;基于網(wǎng)站的搜索引擎研究[J];大連海事大學(xué)學(xué)報(bào);2008年S1期

8 李武裝;;基于語義的企業(yè)搜索引擎的研究與實(shí)現(xiàn)[J];電腦知識(shí)與技術(shù)(學(xué)術(shù)交流);2007年08期

9 李海豐;;基于Lucene的企業(yè)搜索引擎研究及應(yīng)用[J];電腦知識(shí)與技術(shù);2009年04期

10 張斌;周爾寧;;基于Nutch的分布式紡織垂直搜索引擎研究[J];電腦知識(shí)與技術(shù);2009年21期

中國博士學(xué)位論文全文數(shù)據(jù)庫 前3條

1 陳治平;智能搜索引擎理論與應(yīng)用研究[D];湖南大學(xué);2003年

2 李文舉;智能交通中圖像處理技術(shù)應(yīng)用的研究[D];大連海事大學(xué);2005年

3 李紅梅;智能元搜索引擎關(guān)鍵技術(shù)研究[D];西安電子科技大學(xué);2009年

中國碩士學(xué)位論文全文數(shù)據(jù)庫 前10條

1 潘勝一;基于倒排索引的壓縮算法性能研究[D];杭州電子科技大學(xué);2009年

2 孫玲;漢語數(shù)字語音識(shí)別技術(shù)與實(shí)現(xiàn)方法研究[D];華中科技大學(xué);2004年

3 彭淑敏;神經(jīng)網(wǎng)絡(luò)圖像識(shí)別技術(shù)研究與實(shí)現(xiàn)[D];西安電子科技大學(xué);2005年

4 荊濤;基于后綴數(shù)組的Web用戶訪問模式高效挖掘算法[D];吉林大學(xué);2005年

5 高騰;靜止背景下運(yùn)動(dòng)目標(biāo)跟蹤方法的研究[D];西北大學(xué);2005年

6 盧群;UIMA架構(gòu)下Web訪問信息的研究和應(yīng)用[D];上海交通大學(xué);2007年

7 王曉悅;企業(yè)級(jí)搜索引擎Omnifind自動(dòng)化測試系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];北京郵電大學(xué);2007年

8 朱珠;基于Hadoop的海量數(shù)據(jù)處理模型研究和應(yīng)用[D];北京郵電大學(xué);2008年

9 張建梁;基于云計(jì)算的語義搜索引擎研究[D];復(fù)旦大學(xué);2009年

10 王波;基于Lucene的企業(yè)搜索引擎[D];北京郵電大學(xué);2009年

【相似文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前10條

1 逄利華;張錦春;;基于Hadoop的分布式數(shù)據(jù)庫系統(tǒng)[J];辦公自動(dòng)化;2014年05期

2 鄭瑋;;Hadoop釋放大數(shù)據(jù)潛能[J];軟件和信息服務(wù);2012年10期

3 劉爾凱;崔振東;;基于HADOOP技術(shù) 實(shí)現(xiàn)銀行歷史數(shù)據(jù)線上化研究[J];金融電子化;2014年01期

4 鄒群;;一種基于Hadoop的數(shù)字圖書存儲(chǔ)系統(tǒng)設(shè)計(jì)方案[J];黑龍江史志;2014年01期

5 諶章義;畢偉;向萬紅;王國安;吳愛國;;基于Hadoop的海量電費(fèi)數(shù)據(jù)處理模型[J];計(jì)算機(jī)系統(tǒng)應(yīng)用;2014年05期

6 ;大數(shù)據(jù)不等于Hadoop[J];辦公自動(dòng)化;2014年06期

7 ;保障Hadoop數(shù)據(jù)安全的十大措施[J];計(jì)算機(jī)與網(wǎng)絡(luò);2013年08期

8 王峰;雷葆華;;Hadoop分布式文件系統(tǒng)的模型分析[J];電信科學(xué);2010年12期

9 蘇小會(huì);何婧媛;;Hadoop中任務(wù)調(diào)度算法的改進(jìn)[J];電子設(shè)計(jì)工程;2012年22期

10 林偉偉;;一種改進(jìn)的Hadoop數(shù)據(jù)放置策略[J];華南理工大學(xué)學(xué)報(bào)(自然科學(xué)版);2012年01期

中國重要報(bào)紙全文數(shù)據(jù)庫 前8條

1 本報(bào)記者 郭濤;機(jī)器大數(shù)據(jù)也離不開Hadoop[N];中國計(jì)算機(jī)報(bào);2013年

2 本報(bào)記者 王星;Hadoop引發(fā)大數(shù)據(jù)之戰(zhàn)[N];電腦報(bào);2012年

3 本報(bào)記者 鄒大斌;Hadoop一體機(jī)降低大數(shù)據(jù)門檻[N];計(jì)算機(jī)世界;2012年

4 孫定;云計(jì)算、大數(shù)據(jù)與Hadoop[N];計(jì)算機(jī)世界;2011年

5 樂天　編譯;Hadoop：打開大數(shù)據(jù)之門的金鑰匙[N];計(jì)算機(jī)世界;2012年

6 范范　編譯;Hadoop用戶可以使用多種搜索引擎[N];網(wǎng)絡(luò)世界;2013年

7 波波　編譯;Hadoop、Web 2.0為磁帶帶來新商機(jī)[N];網(wǎng)絡(luò)世界;2013年

8 本報(bào)記者 郭濤;讓更多人能夠使用Hadoop[N];中國計(jì)算機(jī)報(bào);2012年

中國碩士學(xué)位論文全文數(shù)據(jù)庫 前10條

1 高仲峰;基于Hadoop平臺(tái)的橋梁結(jié)構(gòu)健康監(jiān)測系統(tǒng)的應(yīng)用[D];西安科技大學(xué);2012年

2 張麗云;基于Hadoop的企業(yè)知識(shí)管理系統(tǒng)的主要功能的研究與實(shí)現(xiàn)[D];東北師范大學(xué);2014年

3 楊寧;基于Hadoop平臺(tái)的廣告檢測系統(tǒng)研究與實(shí)現(xiàn)[D];復(fù)旦大學(xué);2012年

4 張興平;基于Hadoop的微博用戶情感分類研究與實(shí)現(xiàn)[D];西安電子科技大學(xué);2014年

5 湯艷;基于Hadoop架構(gòu)的移動(dòng)終端云資源訪問模式研究與應(yīng)用[D];北京工業(yè)大學(xué);2013年

6 張建;基于Hadoop的云計(jì)算模型研究及氣象應(yīng)用[D];南京信息工程大學(xué);2012年

7 邰建華;Hadoop平臺(tái)下的海量數(shù)據(jù)存儲(chǔ)技術(shù)研究[D];東北石油大學(xué);2012年

8 劉寅;Hadoop下基于貝葉斯分類的氣象數(shù)據(jù)挖掘研究[D];南京信息工程大學(xué);2012年

9 李金朋;基于Hadoop平臺(tái)的重疊社區(qū)發(fā)現(xiàn)算法研究[D];吉林大學(xué);2014年

10 潘振鵬;基于Hadoop的文本分類系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];哈爾濱工業(yè)大學(xué);2013年

，

本文編號(hào)：1189485