本文選題：交通監(jiān)控視頻 + HDFS��； 參考：《計(jì)算機(jī)科學(xué)》2015年05期

【摘要】：利用HDFS進(jìn)行大規(guī)模交通監(jiān)控視頻的存儲(chǔ)和處理是一種可靠、高效、可擴(kuò)展的數(shù)據(jù)存儲(chǔ)方案。針對(duì)HDFS默認(rèn)的機(jī)架感知策略可能造成存儲(chǔ)熱點(diǎn)這一問題,提出了一種基于事件密集度的交通監(jiān)控視頻放置策略。該策略利用交通視頻可按事件類型進(jìn)行分類這一特征,在數(shù)據(jù)放置時(shí)將數(shù)據(jù)節(jié)點(diǎn)中已存儲(chǔ)的各類型的事件視頻可能對(duì)其造成的負(fù)載作為節(jié)點(diǎn)的主要評(píng)價(jià)因素之一,同時(shí)結(jié)合節(jié)點(diǎn)的實(shí)時(shí)負(fù)載、磁盤容量等因素進(jìn)行綜合評(píng)價(jià),選擇最佳的數(shù)據(jù)放置節(jié)點(diǎn),從而平衡數(shù)據(jù)節(jié)點(diǎn)的負(fù)載。實(shí)驗(yàn)表明,基于事件密集度的交通監(jiān)控視頻放置策略可以改善數(shù)據(jù)節(jié)點(diǎn)的吞吐量,提高存儲(chǔ)系統(tǒng)性能。
[Abstract]:The storage and processing of large-scale traffic surveillance video using HDFS is a reliable, efficient and extensible data storage scheme. Aiming at the problem that HDFS's default rack awareness strategy may cause storage hot spots, a traffic surveillance video placement strategy based on event intensity is proposed. The strategy takes advantage of the fact that traffic video can be classified by event type, and takes the load caused by each type of event video stored in the data node as one of the main evaluation factors when the data is placed. At the same time, combined with the real-time load of the node, disk capacity and other factors for comprehensive evaluation, select the best data placement node, so as to balance the load of the data node. Experiments show that the traffic surveillance video placement strategy based on event intensity can improve the throughput of data nodes and improve the performance of storage system.
【作者單位】： 同濟(jì)大學(xué)計(jì)算機(jī)科學(xué)與技術(shù)系;同濟(jì)大學(xué)嵌入式系統(tǒng)與服務(wù)計(jì)算教育部重點(diǎn)實(shí)驗(yàn)室;
【基金】：科技部國際合作專項(xiàng)(2012DFG11580)資助
【分類號(hào)】：TP333

【參考文獻(xiàn)】

相關(guān)期刊論文 前6條

1 王國鋒;宋鵬飛;張?zhí)N靈;;智能交通系統(tǒng)發(fā)展與展望[J];公路;2012年05期

2 林偉偉;;一種改進(jìn)的Hadoop數(shù)據(jù)放置策略[J];華南理工大學(xué)學(xué)報(bào)(自然科學(xué)版);2012年01期

3 徐驍勇;潘郁;丁燕艷;;基于灰色馬爾可夫鏈預(yù)測模型的HDFS云存儲(chǔ)副本選擇策略[J];計(jì)算機(jī)應(yīng)用;2011年S2期

4 劉琨;鈕文良;;一種改進(jìn)的Hadoop數(shù)據(jù)負(fù)載均衡算法[J];河南理工大學(xué)學(xué)報(bào)(自然科學(xué)版);2013年03期

5 武文斌;;視頻監(jiān)控云存儲(chǔ)模型設(shè)計(jì)[J];山西科技;2012年03期

6 張慶華;;云存儲(chǔ)技術(shù)在視頻監(jiān)控中的發(fā)展與應(yīng)用[J];中國安防;2013年08期

【共引文獻(xiàn)】

相關(guān)期刊論文 前10條

1 武娟;黃海;錢鋒;李擁軍;壽質(zhì)彬;;基于多變量動(dòng)態(tài)算法的Hadoop負(fù)載均衡優(yōu)化與實(shí)現(xiàn)[J];電信科學(xué);2012年12期

2 常屹冉;郭炳輝;陳軍;李漢彬;;基于GIS的公路信息更新管理平臺(tái)的設(shè)計(jì)和實(shí)現(xiàn)[J];地理空間信息;2013年01期

3 李紅;;基于Google Bigtable的海量數(shù)據(jù)存儲(chǔ)探索[J];鞍山師范學(xué)院學(xué)報(bào);2013年04期

4 孫成強(qiáng);Yongseong Cho;Jongsun Choi;Jaeyoung Choi;;Towards delivery of situational information in distributed environments[J];Journal of Measurement Science and Instrumentation;2013年03期

5 唐宏;;基于MapReduce的大規(guī)模流量分析系統(tǒng)的設(shè)計(jì)[J];電信科學(xué);2013年12期

6 馬飛;;多云工作流優(yōu)化傳輸費(fèi)用的數(shù)據(jù)布局策略[J];電腦知識(shí)與技術(shù);2014年10期

7 劉鵬曦;許王燕;;一種冗余地理數(shù)據(jù)存儲(chǔ)系統(tǒng)[J];大眾科技;2014年01期

8 席丹;;交通系統(tǒng)計(jì)算機(jī)的應(yīng)用現(xiàn)狀與對(duì)策探索[J];產(chǎn)業(yè)與科技論壇;2014年09期

9 楊關(guān)建;華澤璽;楊彬;;Hadoop平臺(tái)在智能變電站中的應(yīng)用研究[J];電源技術(shù)應(yīng)用;2014年03期

10 李月娥;申海洋;;車輛交通事故視頻監(jiān)測算法研究[J];測試技術(shù)學(xué)報(bào);2014年04期

相關(guān)會(huì)議論文 前4條

1 祁昊穎;;大數(shù)據(jù)時(shí)代電信運(yùn)營商文件系統(tǒng)新思考[A];2013年中國信息通信研究新進(jìn)展論文集[C];2014年

2 馮小梅;劉怡君;;云存儲(chǔ)技術(shù)的現(xiàn)狀分析與發(fā)展趨勢(shì)[A];廣西計(jì)算機(jī)學(xué)會(huì)2014年學(xué)術(shù)年會(huì)論文集[C];2014年

3 汪中琳;喬自知;郭景贊;;移動(dòng)運(yùn)維支撐系統(tǒng)的互聯(lián)網(wǎng)思維重構(gòu)[A];2014全國無線及移動(dòng)通信學(xué)術(shù)大會(huì)論文集[C];2014年

4 祁昊穎;;大數(shù)據(jù)時(shí)代電信運(yùn)營商文件系統(tǒng)新思考[A];2013年中國信息通信研究新進(jìn)展論文集[C];2014年

相關(guān)博士學(xué)位論文 前10條

1 楊永全;飲食健康中的食物體積估算云計(jì)算技術(shù)研究[D];中國海洋大學(xué);2013年

2 孫茂華;安全多方計(jì)算及其應(yīng)用研究[D];北京郵電大學(xué);2013年

3 胡德鵬;基于農(nóng)業(yè)本體問句分析的問答系統(tǒng)研究與架構(gòu)設(shè)計(jì)[D];中國農(nóng)業(yè)科學(xué)院;2013年

4 王金寶;云計(jì)算系統(tǒng)中索引與查詢處理技術(shù)研究[D];哈爾濱工業(yè)大學(xué);2013年

5 韓晶;大數(shù)據(jù)服務(wù)若干關(guān)鍵技術(shù)研究[D];北京郵電大學(xué);2013年

6 董超;基于網(wǎng)絡(luò)流量監(jiān)測的移動(dòng)互聯(lián)網(wǎng)特征研究[D];北京郵電大學(xué);2013年

7 姜春茂;基于移動(dòng)P2P的分布式存儲(chǔ)和傳輸機(jī)制研究[D];哈爾濱工程大學(xué);2013年

8 陳軍;基于G/S模式的空間分析云服務(wù)關(guān)鍵技術(shù)研究[D];成都理工大學(xué);2012年

9 吳和生;云計(jì)算環(huán)境中多核多進(jìn)程負(fù)載均衡技術(shù)的研究與應(yīng)用[D];南京大學(xué);2013年

10 孫鵬;動(dòng)車組維修物聯(lián)網(wǎng)及其關(guān)鍵技術(shù)研究[D];中國鐵道科學(xué)研究院;2013年

相關(guān)碩士學(xué)位論文 前10條

1 宋婭菲;基于競標(biāo)模式的云存儲(chǔ)副本放置策略研究[D];華中師范大學(xué);2012年

2 陳聰;基于云存儲(chǔ)的視頻監(jiān)控平臺(tái)[D];華南理工大學(xué);2012年

3 魯志華;杭州市拱墅區(qū)交通資源整合優(yōu)化研究[D];浙江大學(xué);2013年

4 孫浩川;模型庫系統(tǒng)中工作流與數(shù)據(jù)存儲(chǔ)機(jī)制研究[D];華中科技大學(xué);2012年

5 呂培培;云計(jì)算環(huán)境的數(shù)據(jù)存儲(chǔ)管控技術(shù)研究[D];北方工業(yè)大學(xué);2013年

6 毛宇;面向移動(dòng)云計(jì)算的數(shù)據(jù)安全保護(hù)技術(shù)研究[D];廣東工業(yè)大學(xué);2013年

7 董其文;基于HDFS的小文件存儲(chǔ)方法的研究[D];大連海事大學(xué);2013年

8 莊共波;智能交通系統(tǒng)中的地圖路況服務(wù)研究與實(shí)現(xiàn)[D];北京郵電大學(xué);2013年

9 宋彩華;云資源監(jiān)控中的數(shù)據(jù)傳輸模型研究[D];鄭州大學(xué);2013年

10 黨希望;基于主次種群蟻群算法的動(dòng)態(tài)路徑優(yōu)化研究[D];西南交通大學(xué);2013年

【二級(jí)參考文獻(xiàn)】

相關(guān)期刊論文 前10條

1 唐箭;;云存儲(chǔ)系統(tǒng)的分析與應(yīng)用研究[J];電腦知識(shí)與技術(shù);2009年20期

2 張龍立;;云存儲(chǔ)技術(shù)探討[J];電信科學(xué);2010年S1期

3 李峰;智能交通系統(tǒng)在國外的發(fā)展趨勢(shì)[J];國外公路;1999年01期

4 林偉偉;齊德昱;劉波;;基于資源融合的網(wǎng)格任務(wù)調(diào)度模型與算法[J];華南理工大學(xué)學(xué)報(bào)(自然科學(xué)版);2008年01期

5 林偉偉;;一種改進(jìn)的Hadoop數(shù)據(jù)放置策略[J];華南理工大學(xué)學(xué)報(bào)(自然科學(xué)版);2012年01期

6 谷國太;肖漢;;并行計(jì)算與并行處理技術(shù)的應(yīng)用研究[J];河南理工大學(xué)學(xué)報(bào)(自然科學(xué)版);2009年05期

7 蔡明,任綺年,易劍光;視頻監(jiān)控系統(tǒng)中的視頻存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[J];江南大學(xué)學(xué)報(bào);2003年02期

8 欒亞建;黃爛，

本文編號(hào)：1946729