本文關(guān)鍵詞：基于Hadoop的倒排索引的研究與實(shí)現(xiàn)

  更多相關(guān)文章： 大數(shù)據(jù) Hadoop MapReduce 倒排索引

【摘要】：隨著計(jì)算機(jī)與網(wǎng)絡(luò)的發(fā)展,人們信息獲取的方式開始越來越依賴于網(wǎng)絡(luò)。而作為信息展現(xiàn)與搜索的工具——搜索引擎,在需求的驅(qū)動(dòng)下也有了長足的發(fā)展。面對(duì)日益龐大的數(shù)據(jù)和信息,如何確保搜索引擎的效率已經(jīng)成為各大搜索引擎商們急需解決的問題。本論文旨在通過使用大數(shù)據(jù)技術(shù)對(duì)大規(guī)模數(shù)據(jù)集進(jìn)行搜集和整理,并在開源架構(gòu)Hadoop下實(shí)現(xiàn)這一搜索引擎的基礎(chǔ)算法——倒排索引。
【作者單位】： 電子科技大學(xué)成都學(xué)院;
【分類號(hào)】：TP391.3;TP311.13
【正文快照】： 1引言全文檢索技術(shù)是現(xiàn)代計(jì)算機(jī)信息學(xué)、計(jì)算機(jī)網(wǎng)絡(luò)學(xué)科的一項(xiàng)重要技術(shù),在萬維網(wǎng)搜索引擎、數(shù)字圖書館、數(shù)字多媒體技術(shù)等領(lǐng)域都有廣泛而深遠(yuǎn)的利用價(jià)值和研究價(jià)值。因此,對(duì)于倒排索引以及全文檢索技術(shù)的研究和探索不僅具有理論價(jià)值,而且極具商業(yè)前景。2算法介紹倒排索引,通常

【參考文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前1條

1 董新華;李瑞軒;周灣灣;王聰;薛正元;廖東杰;;Hadoop系統(tǒng)性能優(yōu)化與功能增強(qiáng)綜述[J];計(jì)算機(jī)研究與發(fā)展;2013年S2期

中國博士學(xué)位論文全文數(shù)據(jù)庫 前1條

1 韓海雯;MapReduce計(jì)算任務(wù)調(diào)度的資源配置優(yōu)化研究[D];華南理工大學(xué);2013年

【共引文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前9條

1 李冰利;劉釗遠(yuǎn);賈威威;;基于NBD的彈性云存儲(chǔ)研究與設(shè)計(jì)[J];計(jì)算機(jī)與數(shù)字工程;2015年02期

2 劉青;鮑愛華;倪桂強(qiáng);;大數(shù)據(jù)技術(shù)專題講座(二) 第3講 面向大數(shù)據(jù)處理的MapReduce優(yōu)化技術(shù)[J];軍事通信技術(shù);2015年02期

3 曹畋;;淺析建立面向圖書館用戶的HDFS云存儲(chǔ)服務(wù)系統(tǒng)[J];農(nóng)業(yè)圖書情報(bào)學(xué)刊;2015年09期

4 宋寶燕;王俊陸;王妍;;基于范德蒙碼的HDFS優(yōu)化存儲(chǔ)策略研究[J];計(jì)算機(jī)學(xué)報(bào);2015年09期

5 李德有;趙立波;解晨光;;Hadoop構(gòu)建的銀行海量數(shù)據(jù)存儲(chǔ)系統(tǒng)研究[J];哈爾濱理工大學(xué)學(xué)報(bào);2015年04期

6 任桂禾;王晶;;淺談大數(shù)據(jù)處理技術(shù)架構(gòu)的演進(jìn)[J];信息通信技術(shù);2014年06期

7 盧小賓;王濤;;Google三大云計(jì)算技術(shù)對(duì)海量數(shù)據(jù)分析流程的技術(shù)改進(jìn)優(yōu)化研究[J];圖書情報(bào)工作;2015年03期

8 戴中華;盛鴻彬;王麗莉;;基于Hadoop平臺(tái)的大數(shù)據(jù)分析與處理[J];通訊世界;2015年06期

9 馬艷;陳玉峰;劉興華;郭志紅;蘇東亮;孫溪;;面向設(shè)備狀態(tài)評(píng)估的大數(shù)據(jù)底層平臺(tái)設(shè)計(jì)（英文）[J];山東電力技術(shù);2015年08期

中國碩士學(xué)位論文全文數(shù)據(jù)庫 前1條

1 潘夢(mèng)云;基于Hadoop的數(shù)據(jù)處理系統(tǒng)的設(shè)計(jì)[D];河北工程大學(xué);2014年

【二級(jí)參考文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前10條

1 劉正偉;文中領(lǐng);張海濤;;云計(jì)算和云數(shù)據(jù)管理技術(shù)[J];計(jì)算機(jī)研究與發(fā)展;2012年S1期

2 黃，

本文編號(hào)：1256099