天堂国产午夜亚洲专区-少妇人妻综合久久蜜臀-国产成人户外露出视频在线-国产91传媒一区二区三区

當(dāng)前位置:主頁 > 科技論文 > 信息工程論文 >

馬爾可夫決策過程在無線緩存網(wǎng)絡(luò)中的應(yīng)用

發(fā)布時(shí)間:2020-12-09 17:48
  隨著無線通信技術(shù)的發(fā)展,無線傳輸速率越來越快。人們對(duì)無線數(shù)據(jù)傳輸?shù)男枨笠踩找嬖鲩L。與此同時(shí),以內(nèi)容為中心的數(shù)據(jù)(視頻、音頻等)逐漸成為無線數(shù)據(jù)傳輸?shù)闹髁鳌o線緩存技術(shù)就是把這些以內(nèi)容為中心的數(shù)據(jù)儲(chǔ)存在網(wǎng)絡(luò)邊緣的緩存節(jié)點(diǎn)中,從而提高網(wǎng)絡(luò)的整體性能。本文研究了在緩存節(jié)點(diǎn)(存儲(chǔ)空間受限)的幫助下,單個(gè)蜂窩網(wǎng)絡(luò)中下行文件傳輸?shù)恼{(diào)度。具體來說,用戶隨機(jī)地向基站提出文件訪問的請(qǐng)求。當(dāng)文件訪問請(qǐng)求到達(dá)的時(shí)候,基站將該文件多播到發(fā)出請(qǐng)求的用戶和一些選定的緩存節(jié)點(diǎn)。當(dāng)下一次訪問相同文件的用戶落在這些緩存節(jié)點(diǎn)的覆蓋范圍內(nèi)的時(shí)候,緩存節(jié)點(diǎn)可以代替基站承接文件傳輸任務(wù)。在上述文件有限的生命周期內(nèi),由于緩存節(jié)點(diǎn)的儲(chǔ)存空間受限,文件的放置(到緩存節(jié)點(diǎn))和文件的傳輸(到用戶)需要聯(lián)合優(yōu)化。在文件的生命周期中,基站對(duì)每次多播傳輸資源的分配(多播功率和傳輸符號(hào)數(shù)量)被建模成一個(gè)具有隨機(jī)階段數(shù)量的動(dòng)態(tài)規(guī)劃(Dynamic Programming)問題。此類問題無法用現(xiàn)有方法解決,因此,通過將原始問題轉(zhuǎn)換為具有固定階段數(shù)的等效馬爾可夫決策過程(Markov Decision Process),本文開發(fā)了一種漸近最優(yōu)的框架來... 

【文章來源】:哈爾濱工業(yè)大學(xué)黑龍江省 211工程院校 985工程院校

【文章頁數(shù)】:64 頁

【學(xué)位級(jí)別】:碩士

【部分圖文】:

馬爾可夫決策過程在無線緩存網(wǎng)絡(luò)中的應(yīng)用


從第幀開始的一個(gè)文件的多播幀分配示意圖

參考圖,空間,節(jié)點(diǎn),命中率


哈爾濱工業(yè)大學(xué)工學(xué)碩士學(xué)位論文-45-儲(chǔ)存空間(,)的關(guān)系,其中=1,文件平均訪問次數(shù)=100。可以觀察到,在從基準(zhǔn)方案2、3,本文所提出的方案到基線1,基準(zhǔn)在利用緩存節(jié)點(diǎn)分擔(dān)傳輸任務(wù)方面變得更加保守。因此,以上四種方案的緩存命中率按降序排列。圖6-3平均傳輸代價(jià)和緩存節(jié)點(diǎn)儲(chǔ)存空間(,)的關(guān)系盡管基準(zhǔn)方案2和3的緩存命中率高于本文提出的方案,但其對(duì)應(yīng)的基站平均傳輸代價(jià)本文提出的方案(參考圖6-3)。因此,如果關(guān)注的是(有限文件生命周期內(nèi))基站的平均傳輸代價(jià),則最大化緩存命中率并不是最好的策略。圖6-4緩存命中率和緩存節(jié)點(diǎn)儲(chǔ)存空間(,)的關(guān)系為了說明本文提出的方案具有低復(fù)雜度的優(yōu)點(diǎn),本文比較了計(jì)算準(zhǔn)確值函數(shù)(最優(yōu)MDP值迭代算法)和計(jì)算近似值函數(shù)(本文提出的方案,參考第四

示意圖,學(xué)習(xí)算法,近似值,算法


哈爾濱工業(yè)大學(xué)工學(xué)碩士學(xué)位論文-47-接近最優(yōu)解。另外,本文發(fā)現(xiàn)如果使用了不準(zhǔn)確系統(tǒng)信息的MDP算法的性能不如本文提出強(qiáng)化學(xué)習(xí)算法,所以學(xué)習(xí)準(zhǔn)確信息在動(dòng)態(tài)規(guī)劃問題中非常重要。圖6-6強(qiáng)化學(xué)習(xí)算法(算法5.1)中近似值函數(shù)的收斂示意圖6.5本章小結(jié)本章首先描述了數(shù)值仿真的場景,接著給出了三種與本文提出方案相比較的基準(zhǔn)方案。這些基準(zhǔn)方案都是合理的,低復(fù)雜度的,性能優(yōu)越的方案。在已知系統(tǒng)參數(shù)的時(shí)候,本文提出的方案在不同平均文件總訪問次數(shù),文件熱門程度分布以及不同緩存節(jié)點(diǎn)儲(chǔ)存能力的條件下都優(yōu)于三種基準(zhǔn)方案。這是因?yàn)楸疚奶岢龅姆桨冈谔剿髁髁糠至鳎ㄓ镁彺婀?jié)點(diǎn)分擔(dān)基站傳輸任務(wù))比基準(zhǔn)方案1更積極,但是比基準(zhǔn)方案2和3更保守。同時(shí),本章比較了本文提出的近似算法的計(jì)算復(fù)雜度和傳統(tǒng)MDP算法的計(jì)算復(fù)雜度。本文提出的算法可以大大降低傳統(tǒng)MDP算法的復(fù)雜度。圖6-7強(qiáng)化學(xué)習(xí)算法(算法5.1)的性能示意圖


本文編號(hào):2907242

資料下載
論文發(fā)表

本文鏈接:http://sikaile.net/kejilunwen/xinxigongchenglunwen/2907242.html


Copyright(c)文論論文網(wǎng)All Rights Reserved | 網(wǎng)站地圖 |

版權(quán)申明:資料由用戶0a027***提供,本站僅收錄摘要或目錄,作者需要?jiǎng)h除請(qǐng)E-mail郵箱bigeng88@qq.com
中文字幕精品一区二区年下载| 女人精品内射国产99| 小黄片大全欧美一区二区| 人妻少妇系列中文字幕| 美女被后入视频在线观看| 中文久久乱码一区二区| 亚洲女同一区二区另类| 日韩一区二区三区久久| 精品国产丝袜一区二区| 色婷婷成人精品综合一区| 色一欲一性一乱—区二区三区| 中文字幕日韩一区二区不卡| 国产又大又黄又粗又免费| 日本高清不卡一二三区| 日本欧美三级中文字幕| 国产内射一级二级三级| 少妇激情在线免费观看| 免费大片黄在线观看国语| 日本免费一本一二区三区| 免费在线观看欧美喷水黄片| 九九久久精品久久久精品| 果冻传媒精选麻豆白晶晶| 日韩中文字幕免费在线视频| 国产性情片一区二区三区| 大尺度剧情国产在线视频| 草草夜色精品国产噜噜竹菊| 国产又猛又黄又粗又爽无遮挡| 精品少妇一区二区视频| 欧美区一区二在线播放| 精品综合欧美一区二区三区| 一区二区三区日本高清| 国内九一激情白浆发布| 亚洲最新中文字幕在线视频 | 午夜国产精品福利在线观看| 国产精品不卡高清在线观看| 久久永久免费一区二区| 成人精品日韩专区在线观看| 欧美一级内射一色桃子| 国产精品成人一区二区三区夜夜夜 | 亚洲欧美日韩在线中文字幕| 91欧美日韩一区人妻少妇|