【摘要】：隨著各個(gè)行業(yè)信息化的快速發(fā)展,當(dāng)今各個(gè)垂直領(lǐng)域的數(shù)據(jù)越來(lái)越多,而其中有很多數(shù)據(jù)都是無(wú)用的,不需要特殊處理。如何快速、高效從垂直領(lǐng)域內(nèi)的海量數(shù)據(jù)中檢索、智能挖掘出有用的信息成為現(xiàn)在智能搜索引擎發(fā)展的一大難題。隨著搜索引擎技術(shù)的發(fā)展,出現(xiàn)了各種各樣的搜索引擎技術(shù),但絕大部分搜索引擎技術(shù)針對(duì)特殊領(lǐng)域中的特殊術(shù)語(yǔ)和特殊表達(dá)方式不能進(jìn)行有效的檢索和智能推薦,所以傳統(tǒng)的搜索引擎技術(shù)不能滿足當(dāng)前行業(yè)的需求,這就促進(jìn)了分布式智能搜索引擎的發(fā)展。分布式智能搜索引擎不僅僅只是根據(jù)各個(gè)垂直領(lǐng)域的不同進(jìn)行自適應(yīng)處理,而且還能在提高檢索精度和檢索效率的基礎(chǔ)上,針對(duì)已有的海量數(shù)據(jù)檢索、挖掘出用戶潛在關(guān)注的一些信息,讓搜索引擎能夠提供更加友好、智能的為用戶提供交互。本文在深入研究基于Elasticsearch分布式搜索技術(shù)和垂直搜索技術(shù)的基礎(chǔ)上,結(jié)合垂直領(lǐng)域個(gè)性化詞典構(gòu)建技術(shù)和智能推薦技術(shù)的優(yōu)勢(shì),設(shè)計(jì)并實(shí)現(xiàn)了一種基于Elasticsearch的分布式智能搜索引擎。本文提出了一種基于左右遞歸的新詞發(fā)現(xiàn)算法來(lái)實(shí)現(xiàn)了垂直領(lǐng)域個(gè)性化詞典的構(gòu)建,當(dāng)數(shù)據(jù)進(jìn)入搜索引擎時(shí)就會(huì)自動(dòng)的發(fā)現(xiàn)新詞并加入到對(duì)應(yīng)的垂直領(lǐng)域個(gè)性化詞典中。同時(shí),本文將該模塊完美的集成到了Elasticsearch分布式搜索集群中,讓搜索引擎能根據(jù)垂直領(lǐng)域的不同自動(dòng)的加載和更新對(duì)應(yīng)的個(gè)性化詞典,讓搜索引擎更加的高效和準(zhǔn)確。在此之上,本文還設(shè)計(jì)和實(shí)現(xiàn)了智能推薦模塊并集成到了智能分布式搜索引擎之中,提出了一種基于Item的協(xié)同過(guò)濾算法的改進(jìn)方案,能夠在一定程度上提高算法的推薦質(zhì)量,讓搜索引擎變得更加的完美、智能。最后,本文還介紹了智能分布式搜索引擎的搭建過(guò)程和相關(guān)配置優(yōu)化,并通過(guò)多個(gè)方面的實(shí)驗(yàn)驗(yàn)證了本系統(tǒng)的有效性、智能性。
【圖文】：

重慶大學(xué)碩士學(xué)位論文 4 一種智能搜索引擎的設(shè)計(jì)與實(shí)現(xiàn)4.3.1 Elasticsearch 分布式搜索集群的搭建與配置本系統(tǒng)搭建的 Elasticsearch 分布式搜索集群一共有 9 個(gè)節(jié)點(diǎn)，其中包含 2 個(gè)調(diào)度節(jié)點(diǎn)，主節(jié)點(diǎn)將在這兩個(gè)節(jié)點(diǎn)中選舉；1 個(gè)負(fù)責(zé)負(fù)載均衡的節(jié)點(diǎn)，它既不會(huì)作為主節(jié)點(diǎn)，，也不會(huì)存儲(chǔ)數(shù)據(jù)；6 個(gè)數(shù)據(jù)節(jié)點(diǎn)，它們主要用于存儲(chǔ)索引數(shù)據(jù)。本系統(tǒng)采用版本為 1.7.0 的 Elasticsearch，它的目錄結(jié)構(gòu)如圖 4.12 所示。

圖 4.13 主節(jié)點(diǎn)配置圖Fig 4.13 The chart of master node configuration圖 4.14 負(fù)載均衡節(jié)點(diǎn)配置圖
【學(xué)位授予單位】：重慶大學(xué)
【學(xué)位級(jí)別】：碩士
【學(xué)位授予年份】：2016
【分類號(hào)】：TP391.3

【引證文獻(xiàn)】

相關(guān)碩士學(xué)位論文 前7條

1 王蕾;基于WEB的物聯(lián)網(wǎng)實(shí)體搜索技術(shù)研究與應(yīng)用[D];南京郵電大學(xué);2018年

2 竺潤(rùn)龍;博客媒體分析系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[D];華中師范大學(xué);2018年

3 駱金維;基于云平臺(tái)的高職院校課程資源共享系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[D];華南理工大學(xué);2018年

4 劉招帥;安全高效的供應(yīng)鏈管理系統(tǒng)的研究與設(shè)計(jì)[D];北京郵電大學(xué);2018年

5 岳宗林;基于垂直搜索引擎的輿情預(yù)警分析平臺(tái)[D];濟(jì)南大學(xué);2017年

6 何倩武;攜程機(jī)票事業(yè)部大數(shù)據(jù)監(jiān)控平臺(tái)的設(shè)計(jì)與實(shí)現(xiàn)[D];南京大學(xué);2017年

7 張樹(shù)鈞;基于Open edX的蒙古文MOOC平臺(tái)關(guān)鍵技術(shù)研究與實(shí)現(xiàn)[D];內(nèi)蒙古師范大學(xué);2017年

本文編號(hào)：2580753