多媒體網(wǎng)絡(luò)視頻監(jiān)控前端數(shù)據(jù)動態(tài)集成仿真
【文章頁數(shù)】:5 頁
【部分圖文】:
圖1數(shù)據(jù)流處理流程
對多媒體網(wǎng)絡(luò)視頻監(jiān)控前端數(shù)據(jù)進行數(shù)據(jù)集分組,首先對數(shù)據(jù)集中的數(shù)據(jù)流進行劃分,接著對數(shù)據(jù)集進行分組[6]。數(shù)據(jù)流的劃分中首先需要對數(shù)據(jù)進行流處理,具體流程如圖1所示。在數(shù)據(jù)的流處理過程中,需要對加載、轉(zhuǎn)換以及抽取這三個流程進行串行執(zhí)行,即數(shù)據(jù)抽取完畢后必須馬上進行轉(zhuǎn)換處理,完成數(shù)據(jù)....
圖2具體劃分流程
完成過程P后,按照數(shù)據(jù)聚合類型對數(shù)據(jù)流進行劃分,具體劃分流程如圖2所示。完成數(shù)據(jù)流的劃分后對多媒體網(wǎng)絡(luò)視頻監(jiān)控前端數(shù)據(jù)進行數(shù)據(jù)集分組,也就是對多媒體網(wǎng)絡(luò)視頻監(jiān)控前端輸入數(shù)據(jù)的記錄集進行劃分,將其劃分為多個原記錄集以便于對這些子記錄集實施并行處理[7]。首先對數(shù)據(jù)集進行完整性約束處....
圖3數(shù)據(jù)記錄集具體劃分方式
完成數(shù)據(jù)記錄集的完整性約束處理與互斥性約束處理后,通過元祖分組方法[8]對數(shù)據(jù)記錄集進行分組,也就是將數(shù)據(jù)記錄集中的記錄集元祖隨機劃分到M個子記錄集中。使各個子記錄集中包含大致等量的記錄集元祖,為數(shù)據(jù)集的處理提供一定的負載平衡。2.2數(shù)據(jù)動態(tài)聚合處理
圖4垂直與水平這兩個維度的并行處理流程
完成數(shù)據(jù)集分組后,先對數(shù)據(jù)流進行并行處理,將并行處理后的數(shù)據(jù)流進行結(jié)果合并處理,由此完成數(shù)據(jù)的動態(tài)聚合處理。首先對數(shù)據(jù)流進行并行處理,通過MapReduce編程模型對數(shù)據(jù)流進行并行處理,分別從垂直與水平這兩個維度來處理[9]。垂直維度的數(shù)據(jù)流并行處理需要對數(shù)據(jù)集元祖進行加工性活動....
本文編號:3915225
本文鏈接:http://sikaile.net/kejilunwen/wltx/3915225.html