本文關(guān)鍵詞：面向勞動(dòng)者就業(yè)信息服務(wù)平臺(tái)的分布式存儲(chǔ)系統(tǒng)的設(shè)計(jì)和實(shí)現(xiàn)，，由筆耕文化傳播整理發(fā)布。

【摘要】：隨著信息技術(shù)的蓬勃發(fā)展,網(wǎng)絡(luò)已經(jīng)成為了重要的信息載體,大眾對(duì)網(wǎng)絡(luò)數(shù)據(jù)的需求越來越大,其中之一就是勞動(dòng)者就業(yè)信息。當(dāng)前勞動(dòng)者就業(yè)分散的管理在各級(jí)地方政府部門,由于部門數(shù)據(jù)之間相互隔離和技術(shù)水平的限制,形成了很多信息孤島,使得大量求職者與企業(yè)管理人員很難在短時(shí)間獲取到自己需要的全面就業(yè)信息資源,一定程度造成了當(dāng)前求職難、招工難等社會(huì)問題。為了促進(jìn)全國就業(yè)服務(wù)與就業(yè)管理信息交流和數(shù)據(jù)共享,充分挖掘和利用就業(yè)數(shù)據(jù)信息,急需一個(gè)統(tǒng)一的勞動(dòng)者就業(yè)數(shù)據(jù)數(shù)據(jù)存儲(chǔ)系統(tǒng),向社會(huì)公眾提供高效、優(yōu)質(zhì)、規(guī)范、透明的就業(yè)服務(wù)。 本文對(duì)分布式存儲(chǔ)相關(guān)技術(shù)以及相關(guān)經(jīng)典分布式系統(tǒng)進(jìn)行了調(diào)研和分析,結(jié)合就業(yè)信息的數(shù)據(jù)的特點(diǎn)和需求,設(shè)計(jì)并實(shí)現(xiàn)了勞動(dòng)者就業(yè)信息的分布式存儲(chǔ)系統(tǒng)。系統(tǒng)由三個(gè)子系統(tǒng)組成。存儲(chǔ)子系統(tǒng)采用了開源分布式存儲(chǔ)系統(tǒng)Cassandra負(fù)責(zé)勞動(dòng)者就業(yè)數(shù)據(jù)的永久化存儲(chǔ)。緩存子系統(tǒng)負(fù)責(zé)緩存熱點(diǎn)的就業(yè)數(shù)據(jù)信息,并在多個(gè)地域進(jìn)行部署,從而提升就業(yè)數(shù)據(jù)的訪問效率和降低存儲(chǔ)子系統(tǒng)的壓力。調(diào)度子系統(tǒng)負(fù)責(zé)用戶請(qǐng)求的接入、解析和轉(zhuǎn)發(fā),它有效的連接了存儲(chǔ)子系統(tǒng)和緩存子系統(tǒng)。 論文的成果對(duì)于那些存儲(chǔ)關(guān)系型數(shù)據(jù)、數(shù)據(jù)分散部署在多個(gè)地理位置的存儲(chǔ)系統(tǒng)有一定啟發(fā)作用。同時(shí)對(duì)于分布式緩存系統(tǒng)的設(shè)計(jì)、容災(zāi)以及緩存一致性的方面也能起到一定的借鑒作用。
【關(guān)鍵詞】：分布式存儲(chǔ) 分布式緩存 緩存的分配算法 緩存一致性
【學(xué)位授予單位】：北京郵電大學(xué)
【學(xué)位級(jí)別】：碩士
【學(xué)位授予年份】：2015
【分類號(hào)】：TP333
【目錄】：

• 摘要4-5
• ABSTRACT5-10
• 第一章 緒論10-16
• 1.1 論文研究背景10
• 1.2 分布式存儲(chǔ)系統(tǒng)在國內(nèi)外研究現(xiàn)狀10-13
• 1.2.1 分布式數(shù)據(jù)存儲(chǔ)11-13
• 1.2.2 分布式緩存13
• 1.3 本文主要研究內(nèi)容13-14
• 1.4 本文組織結(jié)構(gòu)14-15
• 1.5 本章小結(jié)15-16
• 第二章 分布式存儲(chǔ)相關(guān)問題與典型系統(tǒng)研究16-23
• 2.1 分布式系統(tǒng)的異常16
• 2.2 分布式存儲(chǔ)系統(tǒng)衡量指標(biāo)16-18
• 2.3 分布式系統(tǒng)的限制18
• 2.4 典型分布式系統(tǒng)的介紹和分析18-22
• 2.4.1 Cassandra19-20
• 2.4.2 Memcached20-21
• 2.4.3 Zookeeper21-22
• 2.5 本章小結(jié)22-23
• 第三章 系統(tǒng)的分析與設(shè)計(jì)23-29
• 3.1 勞動(dòng)者就業(yè)數(shù)據(jù)的特點(diǎn)分析23
• 3.2 系統(tǒng)的功能和設(shè)計(jì)目標(biāo)23-24
• 3.3 系統(tǒng)的設(shè)計(jì)和架構(gòu)24-26
• 3.4 分布式存儲(chǔ)子系統(tǒng)的選擇26-27
• 3.4.1 選擇Cassandra的原因26-27
• 3.4.2 存儲(chǔ)子系統(tǒng)的不足27
• 3.5 本章小結(jié)27-29
• 第四章 分布式緩存子系統(tǒng)的設(shè)計(jì)和實(shí)現(xiàn)29-49
• 4.1 系統(tǒng)的背景29
• 4.2 困難和挑戰(zhàn)29
• 4.3 緩存系統(tǒng)的功能和設(shè)計(jì)29-32
• 4.3.1 功能接口與運(yùn)行方式30-31
• 4.3.2 緩存的部署方式31-32
• 4.3.3 緩存架構(gòu)32
• 4.4 緩沖池32-34
• 4.4.1 緩沖池的背景32-33
• 4.4.2 緩存池的劃分33-34
• 4.5 緩存數(shù)據(jù)的分配算法34-39
• 4.5.1 哈希取模算法34-35
• 4.5.2 一致性哈希算法35-38
• 4.5.3 系統(tǒng)的分配算法實(shí)現(xiàn)38-39
• 4.6 緩存的一致性39-41
• 4.6.1 基于控制器的緩存同步40-41
• 4.6.2 基于外部同步器的方案41
• 4.7 緩存同步器的實(shí)現(xiàn)41-44
• 4.7.1 旁路緩存的一致性對(duì)同步系統(tǒng)的影響41-42
• 4.7.2 同步器的設(shè)計(jì)42-43
• 4.7.3 同步器的高可用43-44
• 4.8 容災(zāi)44-48
• 4.8.1 冗余池的寫入44-45
• 4.8.2 冗余池的讀取45-48
• 4.9 本章小結(jié)48-49
• 第五章 調(diào)度子系統(tǒng)的設(shè)計(jì)和實(shí)現(xiàn)49-57
• 5.1 背景需求49
• 5.2 困難和挑戰(zhàn)49
• 5.3 調(diào)度系統(tǒng)的功能和設(shè)計(jì)49-51
• 5.4 控制器51-54
• 5.4.1 網(wǎng)絡(luò)模塊51-52
• 5.4.2 請(qǐng)求解析模塊52-53
• 5.4.3 請(qǐng)求調(diào)度模塊53-54
• 5.5 元數(shù)據(jù)管理子系統(tǒng)54-55
• 5.6 容災(zāi)55-56
• 5.6.1 控制器的容災(zāi)55-56
• 5.6.2 元數(shù)據(jù)管理子系統(tǒng)容災(zāi)56
• 5.7 本章小結(jié)56-57
• 第六章 系統(tǒng)的部署與驗(yàn)證57-70
• 6.1 系統(tǒng)的部署57-59
• 6.1.1 依賴的外部系統(tǒng)57
• 6.1.2 分布式存儲(chǔ)系統(tǒng)Cassandra的部署57-58
• 6.1.3 分布式緩存子系統(tǒng)的部署58-59
• 6.1.4 調(diào)度子系統(tǒng)的部署59
• 6.2 系統(tǒng)壓力測(cè)試59-69
• 6.2.1 測(cè)試環(huán)境59-60
• 6.2.2 測(cè)試流程60-61
• 6.2.3 測(cè)試結(jié)果61-69
• 6.3 本章小結(jié)69-70
• 第七章 結(jié)論與展望70-72
• 7.1 總結(jié)70-71
• 7.2 展望71-72
• 參考文獻(xiàn)72-75
• 致謝75

【參考文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前7條

1 王世克;吳集;金士堯;;Web緩存技術(shù)概述[J];計(jì)算機(jī)與信息技術(shù);2005年06期

2 王珊;王會(huì)舉;覃雄派;周p

本文編號(hào)：390145