發(fā)布時(shí)間：2017-11-17 05:09

  本文關(guān)鍵詞：基于Hadoop的校園網(wǎng)站日志系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)

  更多相關(guān)文章： 大數(shù)據(jù) Hadoop 校園網(wǎng)站 日志系統(tǒng)

【摘要】：每所高校校園網(wǎng)內(nèi)成百上千的網(wǎng)站每天產(chǎn)生的Web訪問(wèn)日志量級(jí)都以千萬(wàn)計(jì).利用大數(shù)據(jù)技術(shù)對(duì)這些海量、實(shí)時(shí)的數(shù)據(jù)進(jìn)行集中搜集和長(zhǎng)期存儲(chǔ),并通過(guò)后期大數(shù)據(jù)分析來(lái)挖掘這些日志的價(jià)值,無(wú)論從管理運(yùn)維角度,還是從信息安全視角都具有實(shí)際意義.本文以上海交通大學(xué)為例,介紹了利用Hadoop大數(shù)據(jù)平臺(tái),存儲(chǔ)并分析校園網(wǎng)內(nèi)數(shù)千網(wǎng)站日志的系統(tǒng)設(shè)計(jì)和實(shí)現(xiàn).
【作者單位】： 上海交通大學(xué)網(wǎng)絡(luò)信息中心;
【分類號(hào)】：TP393.092
【正文快照】： 0引言隨著云計(jì)算等技術(shù)的興起與發(fā)展,大數(shù)據(jù)正在深刻地影響著人們的工作、學(xué)習(xí)和生活,甚至左右著國(guó)家經(jīng)濟(jì)和社會(huì)發(fā)展,我們已經(jīng)邁入了大數(shù)據(jù)時(shí)代.如何在教育信息化領(lǐng)域充分理解并迎接大數(shù)據(jù)技術(shù)帶來(lái)的機(jī)遇和挑戰(zhàn),利用海量數(shù)據(jù)來(lái)挖掘信息、判斷趨勢(shì)、提高效率?這是高校信息化部

【相似文獻(xiàn)】

中國(guó)期刊全文數(shù)據(jù)庫(kù) 前10條

1 徐麗君;;建設(shè)基于校內(nèi)應(yīng)用的校園網(wǎng)站[J];網(wǎng)絡(luò)與信息;2008年02期

2 耿秀春;;校園網(wǎng)站設(shè)計(jì)[J];中小企業(yè)管理與科技(上旬刊);2009年12期

3 牛志鵬;;淺談我校校園網(wǎng)站的建設(shè)和應(yīng)用[J];科技風(fēng);2009年14期

4 關(guān)洪海;;和諧校園網(wǎng)站的設(shè)計(jì)規(guī)劃[J];成人教育;2010年03期

5 方平;;關(guān)于校園網(wǎng)站建設(shè)的幾點(diǎn)建議[J];科教文匯(中旬刊);2010年08期

6 劉智;;校園網(wǎng)站建設(shè)與管理研究[J];軟件導(dǎo)刊(教育技術(shù));2012年10期

7 吳曉玲;;高校校園網(wǎng)站建設(shè)與應(yīng)用研究[J];黑龍江科技信息;2012年31期

8 馮冬艷;張劍;;校園網(wǎng)站建設(shè)芻議——以山西職業(yè)技術(shù)學(xué)院計(jì)算機(jī)系網(wǎng)站為例[J];計(jì)算機(jī)光盤軟件與應(yīng)用;2012年21期

9 于婧陽(yáng);高鐵剛;;校園網(wǎng)站建設(shè)現(xiàn)狀調(diào)查與反思[J];中小學(xué)信息技術(shù)教育;2009年09期

10 倪志鵬;;中專校園網(wǎng)站設(shè)計(jì)[J];青春歲月;2013年16期

中國(guó)重要會(huì)議論文全文數(shù)據(jù)庫(kù) 前5條

1 吳娜;吳解萬(wàn);;校園網(wǎng)站的建設(shè)與設(shè)計(jì)[A];第二屆全國(guó)解剖學(xué)技術(shù)學(xué)術(shù)會(huì)議論文集[C];2009年

2 徐亞蘭;;校園網(wǎng)站設(shè)計(jì)[A];科技支撐 科學(xué)發(fā)展——2009年促進(jìn)中部崛起專家論壇暨第五屆湖北科技論壇文集[C];2009年

3 張梅;;簡(jiǎn)單校園網(wǎng)站的組建[A];全國(guó)煉鋼連鑄過(guò)程自動(dòng)化技術(shù)交流會(huì)論文集[C];2006年

4 趙偉;;建設(shè)安全的校園網(wǎng)站[A];中國(guó)當(dāng)代教育理論文獻(xiàn)——第四屆中國(guó)教育家大會(huì)成果匯編（下）[C];2007年

5 姜開(kāi)達(dá);章思宇;孫強(qiáng);;基于Hadoop的校園網(wǎng)站日志系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[A];中國(guó)高等教育學(xué)會(huì)教育信息化分會(huì)第十二次學(xué)術(shù)年會(huì)論文集[C];2014年

中國(guó)重要報(bào)紙全文數(shù)據(jù)庫(kù) 前2條

1 ;三網(wǎng)合一溝通無(wú)限[N];中國(guó)電腦教育報(bào);2003年

2 湖北省谷城縣谷伯中學(xué) 郭大春;另類替換幫我剔除惡意代碼[N];中國(guó)電腦教育報(bào);2007年

中國(guó)碩士學(xué)位論文全文數(shù)據(jù)庫(kù) 前8條

1 周高琴;高校校園網(wǎng)站的傳播藝術(shù)[D];湖南大學(xué);2009年

2 張超;高校校園網(wǎng)站設(shè)計(jì)中的交互性研究[D];山東藝術(shù)學(xué)院;2012年

3 張培芝;“高職學(xué)院校園網(wǎng)站”的設(shè)計(jì)與開(kāi)發(fā)[D];華東師范大學(xué);2010年

4 鄔曉明;面向內(nèi)容管理的校園網(wǎng)站系統(tǒng)[D];華東師范大學(xué);2010年

5 孫紅亮;基于三層架構(gòu)的校園網(wǎng)站設(shè)計(jì)與實(shí)現(xiàn)[D];河北師范大學(xué);2014年

6 岳超;基于ASP.NET技術(shù)的校園網(wǎng)站設(shè)計(jì)與實(shí)現(xiàn)[D];吉林大學(xué);2009年

7 張帆;基于JSP的校園網(wǎng)站的設(shè)計(jì)與實(shí)現(xiàn)[D];吉林大學(xué);2013年

8 付榮艷;“校校通”工程中農(nóng)村校園網(wǎng)應(yīng)用績(jī)效對(duì)比分析研究[D];河北師范大學(xué);2014年

，

本文編號(hào)：1194894