海量數(shù)據(jù)查詢優(yōu)化算法的研究
本文關(guān)鍵詞:海量數(shù)據(jù)查詢優(yōu)化算法的研究 出處:《長春工業(yè)大學(xué)》2015年碩士論文 論文類型:學(xué)位論文
更多相關(guān)文章: 海量數(shù)據(jù) 查詢優(yōu)化 top-k查詢
【摘要】:隨著計(jì)算機(jī)應(yīng)用系統(tǒng)和網(wǎng)絡(luò)技術(shù)不斷的發(fā)展和完善,當(dāng)前,越來越多的商業(yè)和政府部門都需要操作海量數(shù)據(jù),如物流行業(yè)、水利部門、科研部門等這些部門處理的數(shù)據(jù)量通常都非常大。并且當(dāng)前的數(shù)據(jù)包括報(bào)表、文字、聲音、圖像、等各種不同種類和層次的信息,這些數(shù)據(jù)有著巨大的價(jià)值。當(dāng)數(shù)據(jù)庫的數(shù)據(jù)量過大時(shí),會(huì)出現(xiàn)系統(tǒng)效率低、消耗大等問題;另一方面數(shù)據(jù)里也有很多無用的冗余,設(shè)計(jì)人員需要在存儲(chǔ)、管理、處理、優(yōu)化等各個(gè)環(huán)節(jié)中加以處理,提取出所需要的信息。所以海量數(shù)據(jù)存儲(chǔ)管理在各行業(yè)的信息化過程中越來越重要,受到了業(yè)內(nèi)人士的廣泛關(guān)注,因此對(duì)海量數(shù)據(jù)存儲(chǔ)查詢算法的研究就很必要。本文綜述了海量數(shù)據(jù)管理技術(shù)的研究及應(yīng)用現(xiàn)狀,在介紹了數(shù)據(jù)庫的存儲(chǔ)優(yōu)化數(shù)據(jù)管理的基礎(chǔ)上,基于索引應(yīng)用、top-k查詢算法、SQL語句、頁面分割等方面的一些優(yōu)化算法和技術(shù),提出了一整套綜合性的優(yōu)化方案,并給出了具體操作和實(shí)驗(yàn)數(shù)據(jù),最后設(shè)計(jì)與實(shí)現(xiàn)了大型房產(chǎn)收費(fèi)系統(tǒng),收費(fèi)系統(tǒng)在各個(gè)環(huán)節(jié)細(xì)致設(shè)計(jì)、全面優(yōu)化。經(jīng)實(shí)驗(yàn)測試后,可以明顯看出房產(chǎn)收費(fèi)系統(tǒng)的運(yùn)行和查詢速度有了明顯的提高。由此可見,文中采用的優(yōu)化文法對(duì)海量數(shù)據(jù)的查詢優(yōu)化是正確有效的。
[Abstract]:With the development of computer application system and network technology continues to improve and, at present, more and more commercial and government departments are required to operate the massive data, such as the logistics industry, water conservancy departments, scientific research departments and other departments of these data are usually very large. And the current data including statements, text, voice, image, etc. different types and levels of information, these data are of great value. When the database is too large, there will be low system efficiency, high consumption; on the other hand, there are a lot of data redundancy, designers need in the storage, management, processing, handling all aspects of optimization etc. and extract the needed information. So the information process of mass data storage and management in various industries are more and more important, has been widespread concern in the industry, so the massive data storage and query count The research is very necessary. This paper summarizes the research and application of massive data management technology, introduces the database storage optimization based on the management of data, based on the index application, Top-k query algorithm, SQL statement, and other aspects of page segmentation algorithm and some optimization techniques, puts forward a set of comprehensive optimization scheme, and gives the specific operation and experimental data, the design and Realization of the large real estate toll system, toll system in all aspects of the detailed design, comprehensive optimization. Through testing, can be clearly seen from the property fee system operation and query speed has been significantly improved. Thus, the query optimization of grammar optimization of massive data is correct and effective.
【學(xué)位授予單位】:長春工業(yè)大學(xué)
【學(xué)位級(jí)別】:碩士
【學(xué)位授予年份】:2015
【分類號(hào)】:TP311.13
【參考文獻(xiàn)】
相關(guān)期刊論文 前10條
1 朱寧賢;;數(shù)據(jù)庫查詢的優(yōu)化策略探討[J];辦公自動(dòng)化;2007年16期
2 邢政科;;數(shù)據(jù)庫優(yōu)化技術(shù)的分析與探討[J];電腦知識(shí)與技術(shù);2011年20期
3 李菲;;SQL Server數(shù)據(jù)庫查詢優(yōu)化方法探究[J];福建電腦;2008年07期
4 吳慧;龐超;;淺談數(shù)據(jù)庫查詢優(yōu)化策略[J];硅谷;2011年05期
5 王果,徐仁佐;結(jié)合哈希過濾的一種改進(jìn)多連接查詢優(yōu)化算法[J];計(jì)算機(jī)工程;2004年07期
6 韓希先;楊東華;李建中;;TKEP:海量數(shù)據(jù)上一種有效的Top-K查詢處理算法[J];計(jì)算機(jī)學(xué)報(bào);2010年08期
7 張海杰;姜守旭;鄒兆年;;不確定圖上的高效top-k近鄰查詢處理算法[J];計(jì)算機(jī)學(xué)報(bào);2011年10期
8 王艷;秦玉平;劉衛(wèi)江;;分布式數(shù)據(jù)庫中數(shù)據(jù)查詢優(yōu)化算法研究進(jìn)展[J];渤海大學(xué)學(xué)報(bào)(自然科學(xué)版);2007年01期
9 邊海容;;分布式數(shù)據(jù)庫中數(shù)據(jù)查詢優(yōu)化策略研究[J];科技廣場;2008年12期
10 毛杰;佘名高;;海量數(shù)據(jù)庫查詢優(yōu)化研究[J];軟件導(dǎo)刊;2010年05期
相關(guān)碩士學(xué)位論文 前5條
1 曾雪;海量數(shù)據(jù)的快速查詢算法研究[D];南京郵電大學(xué);2012年
2 李中華;基于.NET的模式實(shí)現(xiàn)和應(yīng)用[D];四川大學(xué);2005年
3 李曉路;數(shù)據(jù)倉庫中海量數(shù)據(jù)存儲(chǔ)與管理的若干關(guān)鍵技術(shù)研究[D];北京郵電大學(xué);2006年
4 侯瀟;海量數(shù)據(jù)處理中基于數(shù)據(jù)劃分的查詢優(yōu)化研究與實(shí)現(xiàn)[D];國防科學(xué)技術(shù)大學(xué);2007年
5 邵林;高速海量數(shù)據(jù)存儲(chǔ)技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2007年
,本文編號(hào):1380598
本文鏈接:http://sikaile.net/guanlilunwen/wuliuguanlilunwen/1380598.html