發(fā)布時(shí)間：2018-04-01 10:24

  本文選題：通信行為分析　切入點(diǎn)：大數(shù)據(jù)處理策略　出處：《吉林大學(xué)》2017年碩士論文

【摘要】：隨著計(jì)算機(jī)技術(shù)的蓬勃發(fā)展和創(chuàng)新,互聯(lián)網(wǎng)技術(shù)早已深入到了我們生活的方方面面,“互聯(lián)網(wǎng)+”的概念悄然興起,已成為各行業(yè)發(fā)展的“新常態(tài)”。2017年1月,中國互聯(lián)網(wǎng)絡(luò)信息中心(CNNIC)公布了第39次全國互聯(lián)網(wǎng)發(fā)展統(tǒng)計(jì)報(bào)告,報(bào)告顯示,截至2016年12月,我國網(wǎng)民規(guī)模已達(dá)7.31億,手機(jī)網(wǎng)民規(guī)模達(dá)6.95億,較2015年底增長7550萬人。移動(dòng)互聯(lián)網(wǎng)使用人數(shù)持續(xù)增多,網(wǎng)絡(luò)數(shù)據(jù)的爆發(fā)式增長仍未停歇,如何處理對(duì)這些大數(shù)據(jù)進(jìn)而挖掘其潛在規(guī)律和應(yīng)用價(jià)值,越來越受到各行各業(yè)的重視。在如今這個(gè)時(shí)代,數(shù)據(jù)是信息世界里最有價(jià)值的資產(chǎn),而大數(shù)據(jù)是信息技術(shù)產(chǎn)業(yè)的又一次重大技術(shù)變革,具有里程碑式的意義,可以預(yù)見的是,大數(shù)據(jù)將越來越多的在各領(lǐng)域產(chǎn)生巨大影響,為該領(lǐng)域發(fā)展開拓一條新的道路。從CPU內(nèi)部指令集間的指令傳輸?shù)饺祟惖幕鹦翘綔y(cè)工程,通信成了信息時(shí)代最基本的元素,數(shù)據(jù)的產(chǎn)生離不開各種各樣的通信行為,物聯(lián)網(wǎng)和移動(dòng)互聯(lián)網(wǎng)的飛速發(fā)展,使得通信所產(chǎn)生的數(shù)據(jù)更加多樣化,如何準(zhǔn)確、快速從天量網(wǎng)絡(luò)數(shù)據(jù)中挖掘出用戶的通信行為信息,找出并總結(jié)其通信行為特點(diǎn),從而為網(wǎng)絡(luò)管理、網(wǎng)絡(luò)監(jiān)控、設(shè)備的策略管理提供幫助成了值得關(guān)注的問題,需要注意的是,這里所研究的用戶“通信行為”,不僅僅是“人”的,也可以是智能設(shè)備、網(wǎng)絡(luò)終端、虛擬環(huán)境等一切可以產(chǎn)生通信行為的“客體”的行為。在這種背景下,本文針對(duì)目前大數(shù)據(jù)的發(fā)展趨勢(shì),學(xué)習(xí)研究目前流行的大數(shù)據(jù)處理架構(gòu),確定使用Hadoop分布式架構(gòu)作為系統(tǒng)的基礎(chǔ)平臺(tái),并比較各種通信行為分析模式,以了解掌握整個(gè)網(wǎng)絡(luò)環(huán)境下各類用戶通信行為為目標(biāo),深入研究TCP/IP參考模型的各層各類網(wǎng)絡(luò)協(xié)議,針對(duì)用戶的通聯(lián)關(guān)系、通信規(guī)律、常規(guī)網(wǎng)絡(luò)行為等方面,結(jié)合Hadoop分布式處理存儲(chǔ)技術(shù)和網(wǎng)絡(luò)協(xié)議重組還原技術(shù),研究設(shè)計(jì)并實(shí)現(xiàn)了一套通信行為分析的大數(shù)據(jù)處理系統(tǒng),實(shí)現(xiàn)在大數(shù)據(jù)中重組還原所需協(xié)議并找出相關(guān)通聯(lián)信息等功能,并對(duì)網(wǎng)絡(luò)通聯(lián)情況、協(xié)議使用情況、網(wǎng)站瀏覽情況、郵件收發(fā)情況等網(wǎng)絡(luò)通信元數(shù)據(jù)進(jìn)行統(tǒng)計(jì),實(shí)現(xiàn)對(duì)整體網(wǎng)絡(luò)通信情況的掌握,也可針對(duì)需要的特定用戶、特定通信行為進(jìn)行分析,了解其通信行為,掌握其通信規(guī)律。本系統(tǒng)旨在為網(wǎng)絡(luò)管理者提供更為詳實(shí)準(zhǔn)確的網(wǎng)絡(luò)通信行為信息,幫助網(wǎng)絡(luò)管理者在大數(shù)據(jù)背景下更好的監(jiān)督網(wǎng)絡(luò)通信行為,為科學(xué)高效的網(wǎng)絡(luò)管理模式提供堅(jiān)實(shí)有力的保障。
[Abstract]:With the rapid development and innovation of computer technology, Internet technology has already penetrated into all aspects of our lives. The concept of "Internet" has emerged quietly and has become the "new normal" of the development of various industries. The China Internet Network Information Center (CNNIC) has released the 39th National Statistics report on Internet Development. The report shows that as of December 2016, the number of Internet users in China has reached 731 million and the number of mobile Internet users has reached 695 million. The number of people using the mobile Internet continues to increase, and the explosive growth of network data has not stopped. How to deal with these big data and then tap its potential laws and application value, In this era, data is the most valuable asset in the information world, and big data is another major technological change in the information technology industry. Big data will have more and more tremendous influence in various fields, opening up a new way for the development of this field. From the instruction set within the CPU to the Mars exploration project of mankind, communication has become the most basic element of the information age. The generation of data can not be separated from a variety of communication behaviors. With the rapid development of the Internet of things and the mobile Internet, the data generated by communication become more diversified. To find out and summarize the characteristics of communication behavior, so as to provide help for the policy management of network management, network monitoring and equipment management, has become a matter of concern. What should be noted is that the "communication behavior" of users studied here is not only "human". It can also be the behavior of intelligent devices, network terminals, virtual environments and all other "objects" that can produce communication behavior. In this context, this paper studies and studies the current popular big data processing framework in view of big data's current development trend. It is decided to use the Hadoop distributed architecture as the basic platform of the system, and to compare various communication behavior analysis models, in order to understand all kinds of user communication behavior under the entire network environment as the goal, and deeply study all kinds of network protocols of the TCP/IP reference model. In this paper, a big data processing system for communication behavior analysis is designed and implemented based on Hadoop distributed processing storage technology and network protocol recombination and restore technology, aiming at the connection relationship, communication rules and general network behavior of users. To achieve the functions of reorganizing and restoring the required protocols in big data and finding relevant communication information, and statistics on network communication metadata, such as network communication, protocol usage, website browsing, mail sending and receiving, etc. To realize the mastering of the overall network communication situation, but also to analyze the specific communication behavior of the specific users who need it, to understand their communication behavior, The purpose of this system is to provide network managers with more detailed and accurate information on network communication behavior, and to help network managers better supervise network communication behavior under the background of big data. For the scientific and efficient network management model to provide a solid and effective protection.
【學(xué)位授予單位】：吉林大學(xué)
【學(xué)位級(jí)別】：碩士
【學(xué)位授予年份】：2017
【分類號(hào)】：TP311.13

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 張連臣;郵電用戶購買行為分析[J];郵電企業(yè)管理;1994年10期

2 賴幸;賀艷燕;;“80后”的消費(fèi)行為分析及其營銷策略探討[J];新聞傳播;2011年02期

3 ;Radware DefensePro4.0增服務(wù)器行為分析[J];每周電腦報(bào);2007年41期

4 吳永武;錢淑渠;王海英;符祖峰;;公共場(chǎng)景中運(yùn)動(dòng)目標(biāo)的行為分析[J];計(jì)算機(jī)仿真;2014年06期

5 馬萌;于重重;陳鈞;郭雪;;基于行為分析的籃球領(lǐng)域規(guī)律挖掘的應(yīng)用研究[J];計(jì)算機(jī)仿真;2014年05期

6 鐘燕;;網(wǎng)上零售業(yè)消費(fèi)者行為分析[J];經(jīng)營管理者;2010年15期

7 田西柱;;基于高密度人群的人流行為分析[J];物聯(lián)網(wǎng)技術(shù);2013年12期

8 Mikael E.Bj·rling;Jennie Carlsten;Piotr Kessler;Erik Kruse;jMats Stille;;消費(fèi)者行為分析:多媒體豐富通信最為期待[J];互聯(lián)網(wǎng)天地;2006年11期

9 ;NCR推出保險(xiǎn)業(yè)CRM解決方案[J];金融電子化;2001年06期

10 李冠強(qiáng),陳雅,李強(qiáng);中國互聯(lián)網(wǎng)用戶網(wǎng)絡(luò)使用行為分析[J];中國圖書館學(xué)報(bào);2004年05期

相關(guān)會(huì)議論文 前10條

1 程介克;;探索腦化學(xué)——行為分析化學(xué)[A];第四屆海峽兩岸分析化學(xué)學(xué)術(shù)會(huì)議論文集[C];2006年

2 母愛英;武建奇;;京津冀都市圈管治中政府行為分析[A];河北省首屆社會(huì)科學(xué)學(xué)術(shù)年會(huì)論文專輯[C];2007年

3 佟瑞鵬;厙麗飛;劉佳;杜博;劉凱;;緊急狀態(tài)下密集人群高風(fēng)險(xiǎn)行為分析[A];第二十屆海峽兩岸及香港、澳門地區(qū)職業(yè)安全健康學(xué)術(shù)研討會(huì)暨中國職業(yè)安全健康協(xié)會(huì)2012學(xué)術(shù)年會(huì)論文集[C];2012年

4 徐越;;浙江省1542名初中學(xué)生嘗試吸煙行為分析[A];履行框架公約 創(chuàng)建無煙環(huán)境——第13屆全國吸煙與健康學(xué)術(shù)研討會(huì)暨第三屆煙草控制框架公約論壇論文集[C];2007年

5 吳有富;沈俊;代模;;交通目標(biāo)檢測(cè)及它們的行為分析(英文)[A];第二屆貴州省自然科學(xué)優(yōu)秀學(xué)術(shù)論文評(píng)選獲獎(jiǎng)?wù)撐募?007年）[C];2007年

6 熊國強(qiáng);;企業(yè)清潔能源生產(chǎn)的經(jīng)濟(jì)行為分析[A];新世紀(jì) 新機(jī)遇 新挑戰(zhàn)——知識(shí)創(chuàng)新和高新技術(shù)產(chǎn)業(yè)發(fā)展（下冊(cè)）[C];2001年

7 張芮;胡影;鄭康鋒;;基于行為分析的惡意代碼潛伏性評(píng)估方法[A];2013年中國信息通信研究新進(jìn)展論文集[C];2014年

8 汪定偉;;分組的多屬性逆向拍賣的評(píng)標(biāo)行為分析[A];第五屆（2010）中國管理學(xué)年會(huì)——信息管理分會(huì)場(chǎng)論文集[C];2010年

9 馮立偉;戴耀華;張延峰;張淑一;張帥明;;藥店與兒童合理用藥關(guān)系初探——偽裝腹瀉患兒家長藥店購藥行為分析[A];2008年中國藥學(xué)會(huì)學(xué)術(shù)年會(huì)暨第八屆中國藥師周論文集[C];2008年

10 李麗純;;基于經(jīng)濟(jì)利益圓周假說的農(nóng)民專業(yè)合作行為分析[A];2006年湖南社科聯(lián)學(xué)科前沿問題研究論壇論文集[C];2006年

相關(guān)重要報(bào)紙文章 前10條

1 本報(bào)記者 呂志強(qiáng) 通訊員 楊敬忠;農(nóng)行浙江分行堅(jiān)持員工行為分析評(píng)價(jià)[N];中國城鄉(xiāng)金融報(bào);2007年

2 孟祥妲;個(gè)人行為分析是房地產(chǎn)問題的出發(fā)點(diǎn)(系列之二)[N];中華建筑報(bào);2011年

3 格上理財(cái)研究中心 歐陽嵐;資管行業(yè)客戶投資需求行為分析[N];企業(yè)家日?qǐng)?bào);2014年

4 恒泰證券 于冬旭;中小投資者非理性交易行為分析[N];證券時(shí)報(bào);2012年

5 ;網(wǎng)絡(luò)行為分析洞察助力中國CMO[N];網(wǎng)絡(luò)世界;2012年

6 山東旅游職業(yè)學(xué)院 王煜琴 韓國華 宋云衫;山東省游客消費(fèi)行為分析與啟示[N];中國旅游報(bào);2013年

7 ;兩個(gè)女報(bào)人的生養(yǎng)行為分析[N];北京科技報(bào);2004年

8 周躍;湖南移動(dòng)“商易通”惠民便民[N];人民郵電;2008年

9 查淑琦;不可估量的籌碼[N];中國經(jīng)營報(bào);2002年

10 浙江師范大學(xué)旅游與資源管理學(xué)院 駱高遠(yuǎn);中國公民旅游不文明行為分析及其治理對(duì)策[N];江南游報(bào);2006年

相關(guān)博士學(xué)位論文 前1條

1 王志忠;可持續(xù)發(fā)展的行為分析與制度安排[D];南京農(nóng)業(yè)大學(xué);2004年

相關(guān)碩士學(xué)位論文 前10條

1 吳沛;柔性電子系統(tǒng)中島-橋結(jié)構(gòu)的力學(xué)行為分析與數(shù)值模擬[D];哈爾濱工業(yè)大學(xué);2015年

2 岑斐;設(shè)計(jì)新手與專家的類比推理行為分析[D];浙江大學(xué);2015年

3 任旭龍;基于復(fù)雜背景的運(yùn)動(dòng)人體檢測(cè)及行為分析研究[D];北京理工大學(xué);2015年

4 張躍騫;基于程序行為分析的主機(jī)異常監(jiān)測(cè)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];北京工業(yè)大學(xué);2015年

5 苗青鵬;基于網(wǎng)絡(luò)行為分析的網(wǎng)絡(luò)管理系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[D];電子科技大學(xué);2014年

6 姜秋生;VMI技術(shù)在軟件行為分析中的應(yīng)用研究[D];西安工業(yè)大學(xué);2013年

7 王汝軍;基于大數(shù)據(jù)的移動(dòng)互聯(lián)網(wǎng)行為分析[D];南京郵電大學(xué);2015年

8 張冰冰;視頻中的人體行為分析關(guān)鍵技術(shù)研究[D];長春工業(yè)大學(xué);2016年

9 陳賀男;基于行為分析的擺渡木馬檢測(cè)技術(shù)研究[D];北京交通大學(xué);2016年

10 陳瑤琳;基于行為分析的云安全免疫系統(tǒng)關(guān)鍵技術(shù)研究[D];廣西大學(xué);2016年

，

本文編號(hào)：1695172