結(jié)合Hadoop大數(shù)據(jù)處理框架的智能快遞信息系統(tǒng)設(shè)計與實現(xiàn)
本文關(guān)鍵詞:結(jié)合Hadoop大數(shù)據(jù)處理框架的智能快遞信息系統(tǒng)設(shè)計與實現(xiàn),由筆耕文化傳播整理發(fā)布。
【摘要】:互聯(lián)網(wǎng)經(jīng)濟和在線服務(wù)的飛速發(fā)展帶領(lǐng)我們進(jìn)入了信息化的社會;ヂ(lián)網(wǎng)技術(shù)的進(jìn)步和移動設(shè)備的普及帶來了巨大的機會,同時也提出了新的挑戰(zhàn)。信息服務(wù)必須時刻關(guān)注最新技術(shù),需要深刻地為客戶考慮?爝f服務(wù)提供商不但要保證能為客戶提供及時,可靠的信息服務(wù),還要關(guān)注信息系統(tǒng)的使用體驗,關(guān)注用戶對細(xì)節(jié)的感受,關(guān)注多樣化用戶的不同需求,F(xiàn)代互聯(lián)網(wǎng)中,信息系統(tǒng)既要滿足多樣的需求,也要面對大量高并發(fā)的數(shù)據(jù)請求。這對服務(wù)系統(tǒng)和數(shù)據(jù)系統(tǒng)工程提出了巨大的要求。本文針對這個情況,進(jìn)行了以下幾方面的工作。1NodeJS Express V81、提出使用高性能輕量化的NodeJS服務(wù)框架Express來搭建信息服務(wù)系統(tǒng)。利用V8引擎的性能優(yōu)勢,減少了成本,降低了開發(fā)難度,提高了程序的響應(yīng)速度。2、對系統(tǒng)數(shù)據(jù)模型進(jìn)行了重新設(shè)計,并創(chuàng)新性的使用了開源的非關(guān)系型數(shù)據(jù)庫Mongo DB。使得系統(tǒng)數(shù)據(jù)模式更加靈活,更加適合大數(shù)據(jù)處理。3、同時結(jié)合當(dāng)前Web2.0時代應(yīng)用設(shè)計的流行趨勢,為系統(tǒng)設(shè)計了對用戶友好的UI。獨立搭建完成了信息系統(tǒng)的主要部分,并對業(yè)務(wù)流程和程序性能兩方面進(jìn)行了測試。結(jié)果令人滿意,系統(tǒng)基本達(dá)到了現(xiàn)代Web應(yīng)用的要求。4、快遞系統(tǒng)在實際應(yīng)用中,會產(chǎn)生大量的,復(fù)雜的數(shù)據(jù)?紤]到數(shù)據(jù)中蘊含的巨大價值,如果能夠得以利用,將進(jìn)一步提升快遞服務(wù)的效果。本次研究搭建了一套Hadoop大數(shù)據(jù)框架,并結(jié)合快遞系統(tǒng)的業(yè)務(wù)特性,編寫相關(guān)腳本進(jìn)行了測試,對大數(shù)據(jù)在快遞信息系統(tǒng)中的運用進(jìn)行了探索。本次研究提出了一種解決快遞信息需求的新的Web應(yīng)用架構(gòu),經(jīng)測試具有較高的性能和較好的用戶體驗,并研究了Hadoop大數(shù)據(jù)框架在快遞信息服務(wù)中的作用。
【關(guān)鍵詞】:快遞信息系統(tǒng) NodeJS Hadoop 大數(shù)據(jù)
【學(xué)位授予單位】:北京建筑大學(xué)
【學(xué)位級別】:碩士
【學(xué)位授予年份】:2016
【分類號】:TP311.13;F259.2
【目錄】:
- 摘要3-4
- ABSTRACT4-8
- 第1章 緒論8-13
- 1.1 課題背景及研究的目的和意義8
- 1.2 本文針對的問題8
- 1.3 大數(shù)據(jù)理論的介紹8-9
- 1.4 HADOOP大數(shù)據(jù)框架的發(fā)展9-10
- 1.5 互聯(lián)網(wǎng)WEB應(yīng)用的發(fā)展介紹10-11
- 1.6 本文的內(nèi)容和結(jié)構(gòu)11-12
- 1.6.1 論文主要的工作11-12
- 1.6.2 論文的結(jié)構(gòu)12
- 1.7 本章小結(jié)12-13
- 第2章 現(xiàn)代WEB應(yīng)用的技術(shù)和設(shè)計13-22
- 2.1 現(xiàn)代WEB應(yīng)用13
- 2.2 超文本標(biāo)記語言(HTML)13
- 2.3 層疊樣式表(CSS)13-14
- 2.4 JAVASCRIP網(wǎng)頁腳本語言14-15
- 2.5 后端框架和技術(shù)15
- 2.6 NODEJS開發(fā)框架15-16
- 2.7 EXPRESS后端框架16-18
- 2.7.1 Express框架的基本原理16-17
- 2.7.2 Express框架Request和Response對象17-18
- 2.8 WEB惡意攻擊和網(wǎng)絡(luò)安全18-20
- 2.8.1 針對Web的攻擊19-20
- 2.9 數(shù)據(jù)庫的介紹和選擇20-21
- 2.10 本章結(jié)論21-22
- 第3章 HADOOP大數(shù)據(jù)框架及相關(guān)生態(tài)22-31
- 3.1 引言22
- 3.2 分布式文件系統(tǒng)的理論22-23
- 3.3 HADOOP的資源管理23-24
- 3.4 HADOOP生態(tài)中的常用組件24-26
- 3.4.1 Hadoop的類SQL開發(fā)引擎Hive24-25
- 3.4.2 Hive的架構(gòu)和其含義25
- 3.4.3 Hive與數(shù)據(jù)庫的區(qū)別25-26
- 3.4.4 Hive的性能分析26
- 3.5 HADOOP的WEB頁面服務(wù)HUE26-27
- 3.6 HADOOP架構(gòu)相關(guān)生態(tài)的總結(jié)27-28
- 3.7 HADOOP在實際生產(chǎn)環(huán)境中的應(yīng)用28-29
- 3.8 HADOOP大數(shù)據(jù)生態(tài)的優(yōu)點29
- 3.9 HADOOP在快遞信息系統(tǒng)中的作用29-30
- 3.10 本章總結(jié)30-31
- 第4章 快遞信息服務(wù)系統(tǒng)的設(shè)計與實現(xiàn)31-56
- 4.1 本章概述31
- 4.2 系統(tǒng)需求分析31
- 4.2.1 普通客戶31
- 4.2.2 快遞人員31
- 4.2.3 網(wǎng)點管理工作人員31
- 4.2.4.數(shù)據(jù)管理和分析人員31
- 4.3 系統(tǒng)硬件架構(gòu)31-32
- 4.4 系統(tǒng)的軟件架構(gòu)32-33
- 4.5 系統(tǒng)數(shù)據(jù)模型分析33-34
- 4.6 系統(tǒng)數(shù)據(jù)模型設(shè)計34-38
- 4.7 MONGOOSE數(shù)據(jù)庫引擎38-42
- 4.8 系統(tǒng)的UI設(shè)計42
- 4.9 頁面的結(jié)構(gòu)和設(shè)計。42-51
- 4.9.1 頁面頭部的設(shè)計43-44
- 4.9.2 客戶功能頁面的設(shè)計44-49
- 4.9.3 員工頁面的UI和功能設(shè)計49-51
- 4.9.4 前端UI設(shè)計總結(jié)51
- 4.10 服務(wù)器后端設(shè)計與實現(xiàn)。51-53
- 4.11 服務(wù)器運維53-54
- 4.11.1 PM2與Nodejs服務(wù)監(jiān)控53
- 4.11.2 PM2監(jiān)控腳本53-54
- 4.12 本章總結(jié)54-56
- 第5章 快遞信息服務(wù)系統(tǒng)的測試56-73
- 5.1 系統(tǒng)的業(yè)務(wù)流程測試56-69
- 5.1.1 測試流程56-69
- 5.1.2 測試結(jié)果69
- 5.2 系統(tǒng)性能優(yōu)化和測試69-72
- 5.2.1 前端性能優(yōu)化的方法69-70
- 5.2.2 前端優(yōu)化代碼70-71
- 5.2.3 性能優(yōu)化測試結(jié)果71-72
- 5.3 本章總結(jié)72-73
- 第6章 利用HADOOP對快遞信息系統(tǒng)進(jìn)行大數(shù)據(jù)優(yōu)化的探索73-86
- 6.1 平臺的搭建73-81
- 6.1.1 系統(tǒng)平臺的參數(shù)73
- 6.1.2 系統(tǒng)的準(zhǔn)備階段73
- 6.1.3 配置SSH免密碼登錄73-74
- 6.1.4 Hadoop的環(huán)境配置74-77
- 6.1.5 測試Hadoop集群77-78
- 6.1.6 Word Count測試78-79
- 6.1.7 配置Hive和Hue79
- 6.1.8 配置HUE79-80
- 6.1.9 配置HIVE80-81
- 6.2 HADOOP集群在快遞系統(tǒng)中運用的探索81-85
- 6.2.1 利用Hadoop計算快遞運單處理事件的時間82
- 6.2.2 實驗設(shè)計82-83
- 6.2.3 Hadood框架測試腳本代碼83-85
- 6.3 本章總結(jié)85-86
- 結(jié)論86-87
- 參考文獻(xiàn)87-89
- 致謝89-90
- 附錄 部分程序代碼90-101
【相似文獻(xiàn)】
中國期刊全文數(shù)據(jù)庫 前10條
1 田潔;戰(zhàn)略信息系統(tǒng)在企業(yè)業(yè)務(wù)層的應(yīng)用[J];中國信息導(dǎo)報;2000年08期
2 郭清順,李叢信,林冬梅;對信息系統(tǒng)建設(shè)中若干成功要素的分析[J];中山大學(xué)學(xué)報(自然科學(xué)版);2001年S1期
3 項振茂,胡建,郭雷英;談公安計算機信息系統(tǒng)建設(shè)[J];公安學(xué)刊(浙江公安高等?茖W(xué)校學(xué)報);2002年03期
4 李健藝;鐵路企業(yè)發(fā)展信息系統(tǒng)的探討[J];甘肅科技縱橫;2003年02期
5 趙文;醫(yī)院信息系統(tǒng)的現(xiàn)狀與展望[J];山東電子;2003年02期
6 羅艷麗,何鐘j;醫(yī)院信息系統(tǒng)的建設(shè)與思考[J];醫(yī)學(xué)信息;2003年12期
7 本刊編輯部;信息系統(tǒng)100改變我們[J];信息系統(tǒng)工程;2003年12期
8 沈彤;;零售業(yè)信息系統(tǒng)的“真金”是什么[J];信息與電腦;2003年07期
9 馮偉;洪波;;對醫(yī)院信息系統(tǒng)建設(shè)的幾點建議[J];中國中醫(yī)藥現(xiàn)代遠(yuǎn)程教育;2004年10期
10 王國強,武麗娟;醫(yī)院信息系統(tǒng)的建設(shè)探討[J];長治學(xué)院學(xué)報;2005年02期
中國重要會議論文全文數(shù)據(jù)庫 前10條
1 寧家駿;;現(xiàn)行信息系統(tǒng)的評估問題[A];第十一屆全國數(shù)據(jù)庫學(xué)術(shù)會議論文集[C];1993年
2 EUgena Staffa;;有效的減災(zāi)信息系統(tǒng)[A];聯(lián)合國國際減輕自然災(zāi)害十年論文精選本論文集[C];2004年
3 劉敏豪;鄔倩倩;于興康;;醫(yī)院信息系統(tǒng)在我院門診調(diào)劑流程的應(yīng)用體會與思考[A];2014年廣東省藥師周大會論文集[C];2014年
4 李巖;;計算機信息系統(tǒng)的安全管理[A];第十八次全國計算機安全學(xué)術(shù)交流會論文集[C];2003年
5 韓東;孫大文;;一個信息系統(tǒng)生效模型及在我國企業(yè)的應(yīng)用分析[A];信息科學(xué)與微電子技術(shù):中國科協(xié)第三屆青年學(xué)術(shù)年會論文集[C];1998年
6 蔡連生;;淺析企業(yè)計算機信息系統(tǒng)的解決方案[A];第二屆全國特種電源與元器件年會論文集[C];2002年
7 張毅;許濤;;信息系統(tǒng)在醫(yī)療行業(yè)中的應(yīng)用[A];第六屆全國計算機應(yīng)用聯(lián)合學(xué)術(shù)會議論文集[C];2002年
8 胡石元;劉耀林;唐旭;劉洋;潘潤秋;;城鎮(zhèn)土地定級估價信息系統(tǒng)的設(shè)計與實現(xiàn)[A];新世紀(jì)土地問題研究[C];2002年
9 廖欣;;醫(yī)院信息系統(tǒng)建設(shè)引入信息工程監(jiān)理機制的探討[A];中國中醫(yī)藥信息研究會第二屆理事大會暨學(xué)術(shù)交流會議論文匯編[C];2003年
10 宋子嶺;;地質(zhì)信息系統(tǒng)的建立及其在礦業(yè)中的應(yīng)用[A];科技、工程與經(jīng)濟社會協(xié)調(diào)發(fā)展——中國科協(xié)第五屆青年學(xué)術(shù)年會論文集[C];2004年
中國重要報紙全文數(shù)據(jù)庫 前10條
1 蘇鳳軒;信息系統(tǒng):物流的靈魂[N];中國交通報;2000年
2 張長青 姜金貴 史同波;悟透基于信息系統(tǒng)的體系作戰(zhàn)[N];中國國防報;2010年
3 本報記者 郝宏升 通訊員 侯俊 方麗玲;河南經(jīng)驗:信息系統(tǒng),建得好更要用得好[N];國家電網(wǎng)報;2011年
4 商蓉蓉;信息系統(tǒng):如何從“讓我用”到“我要用”[N];建筑時報;2013年
5 王甲佳;誰做企業(yè)信息系統(tǒng)的當(dāng)家人[N];中國信息化周報;2014年
6 本報記者 韓國卿;國內(nèi)保險信息系統(tǒng)需上臺階[N];中國保險報;2001年
7 尹伊儷;信息系統(tǒng),何去何從[N];中國建材報;2005年
8 楊周南;企業(yè)建立信息系統(tǒng)的三大誤區(qū)[N];財會信報;2005年
9 楊周南;信息系統(tǒng)的發(fā)展[N];財會信報;2005年
10 楊周南;建立信息系統(tǒng)的可行性分析體系[N];財會信報;2005年
中國博士學(xué)位論文全文數(shù)據(jù)庫 前10條
1 肖明;柴達(dá)木盆地枸杞質(zhì)量安全評估與信息系統(tǒng)建立研究[D];石河子大學(xué);2014年
2 吳明淵;某些Domain的信息系統(tǒng)和閉包空間表示[D];湖南大學(xué);2016年
3 王姣;組織間信息系統(tǒng)協(xié)同形成機理研究[D];吉林大學(xué);2008年
4 吳江;組織—信息系統(tǒng)互動動態(tài)網(wǎng)絡(luò)模擬研究[D];華中科技大學(xué);2009年
5 梁愛民;大型信息系統(tǒng)柔性體系框架多簇理論研究[D];鐵道部科學(xué)研究院;2004年
6 谷勇浩;信息系統(tǒng)風(fēng)險管理理論及關(guān)鍵技術(shù)研究[D];北京郵電大學(xué);2007年
7 楊文彩;企業(yè)信息化環(huán)境下人—信息系統(tǒng)交互效率影響因素及作用機理研究[D];重慶大學(xué);2007年
8 沈延森;快速可重構(gòu)信息系統(tǒng)及其關(guān)鍵技術(shù)研究[D];南京航空航天大學(xué);2001年
9 王素芬;信息系統(tǒng)中信息實現(xiàn)過程分析及建模[D];東華大學(xué);2007年
10 羅偉其;信息大系統(tǒng)的綜合集成方法研究與應(yīng)用[D];華南理工大學(xué);2000年
中國碩士學(xué)位論文全文數(shù)據(jù)庫 前10條
1 楊麗娟;信息系統(tǒng)變更審計的探討[D];首都經(jīng)濟貿(mào)易大學(xué);2008年
2 高鵬飛;L勘察設(shè)計院信息化系統(tǒng)實施戰(zhàn)略規(guī)劃研究[D];昆明理工大學(xué);2015年
3 高杉;序信息系統(tǒng)的同態(tài)性質(zhì)[D];渤海大學(xué);2015年
4 劉公明;云計算環(huán)境下建筑設(shè)備物聯(lián)網(wǎng)信息系統(tǒng)的應(yīng)用研究[D];山東建筑大學(xué);2015年
5 常映紅;實訓(xùn)教學(xué)信息系統(tǒng)的設(shè)計與實現(xiàn)[D];電子科技大學(xué);2015年
6 周兵冰;加油站業(yè)務(wù)統(tǒng)計分析信息系統(tǒng)的設(shè)計與實現(xiàn)[D];電子科技大學(xué);2016年
7 鄧博;遂寧電力公司績效考核管理信息系統(tǒng)的設(shè)計與實現(xiàn)[D];電子科技大學(xué);2015年
8 肖洋;基于J2EE的應(yīng)急救援信息系統(tǒng)的設(shè)計與實現(xiàn)[D];電子科技大學(xué);2015年
9 許歡;安徽省中醫(yī)院信息化建設(shè)的現(xiàn)狀及對策[D];安徽大學(xué);2015年
10 易浩滔;X企業(yè)ERP升級的實施方案設(shè)計與研究[D];清華大學(xué);2015年
本文關(guān)鍵詞:結(jié)合Hadoop大數(shù)據(jù)處理框架的智能快遞信息系統(tǒng)設(shè)計與實現(xiàn),由筆耕文化傳播整理發(fā)布。
,本文編號:327001
本文鏈接:http://sikaile.net/jingjifazhanlunwen/327001.html