發(fā)布時間：2019-03-07 23:00

【摘要】：提出了一種基于Q學習的系統(tǒng)服務性能自優(yōu)化方法.該方法通過感知網絡系統(tǒng)的服務性能狀態(tài)參數變化,利用前饋神經網絡的非線性映射關系得到執(zhí)行動作,綜合系統(tǒng)服務性能變化情況及服務的可用性來計算環(huán)境獎賞函數值,利用Q學習的自學習特性和預測能力,使系統(tǒng)服務性能達到最優(yōu).仿真結果表明,該方法對優(yōu)化系統(tǒng)整體可信性和服務效用具有明顯的優(yōu)越性.
[Abstract]:A self-optimizing method of system service performance based on Q-learning is proposed. By sensing the change of the service performance state parameters of the network system, using the nonlinear mapping relationship of the feedforward neural network to get the execution action, the environmental reward function value is calculated by synthesizing the service performance change and service availability of the system. The self-learning characteristics and predictive ability of Q-learning are used to optimize the service performance of the system. The simulation results show that the proposed method is superior to the overall reliability and service utility of the optimization system.
【作者單位】： 河南科技大學電子信息工程學院;
【基金】：國家自然科學基金項目(61003035,61142002) 河南省科技創(chuàng)新人才計劃項目(12410051006)
【分類號】：TP393.09

【參考文獻】

相關期刊論文 前5條

1 劉海濤;洪炳熔;樸松昊;王雪梅;;不確定性環(huán)境下基于進化算法的強化學習[J];電子學報;2006年07期

2 余濤;甄衛(wèi)國;;基于多步回溯Q(λ)的PSS最優(yōu)控制方法的研究[J];電力系統(tǒng)保護與控制;2011年03期

3 郭慧鵬;懷進鵬;鄧婷;李揚;;一種可信的自適應服務組合機制[J];計算機學報;2008年08期

4 洪淵;劉箴;;基于Q學習的虛擬人自適應感知系統(tǒng)建模[J];計算機應用;2011年01期

5 徐明亮;須文波;;自適應RBF網絡Q學習控制[J];控制與決策;2010年02期

【共引文獻】

相關期刊論文 前10條

1 文俊浩;江卓;涂麗云;何盼;;自適應服務組合中基于語義相似度及面向任務的服務發(fā)現算法(英文)[J];Journal of Southeast University(English Edition);2009年04期

2 趙二虎;陽小龍;彭云峰;隆克平;;CPSM:一種增強IP網絡生存性的客戶端主動服務漂移模型[J];電子學報;2010年09期

3 焦玉民;王強;徐婷;謝慶華;王海濤;;基于GA-Q-learning算法的虛擬維修作業(yè)規(guī)劃模型[J];兵工學報;2013年05期

4 張紅霞;鄒華;林榮恒;楊放春;;基于馬爾科夫決策過程的可適變業(yè)務流程建模及分析[J];電子與信息學報;2013年07期

5 陳洪龍;李仁發(fā);李蕊;Edwin Sha;;一種面向體系結構的自適應軟件構件分派模型及算法[J];計算機研究與發(fā)展;2011年12期

6 陳海燕;劉建勛;胡蓉;;可信Web服務合成研究綜述[J];吉首大學學報(自然科學版);2011年01期

7 王云;韓偉;;對稱協調博弈問題的多智能體強化學習[J];計算機工程與應用;2008年36期

8 韓偉;;效用驅動的Markov強化學習[J];計算機工程與應用;2009年04期

9 劉濟波;朱培棟;;面向信任演化與聯盟的服務組合研究[J];計算機工程與應用;2009年13期

10 王顯志;徐曉飛;王忠杰;;面向組合服務收益優(yōu)化的動態(tài)服務選擇方法[J];計算機學報;2010年11期

相關會議論文 前1條

1 徐明迪;趙恒;張煥國;;面向可靠性的動態(tài)Web服務組合選擇策略研究[A];CCF NCSC 2011——第二屆中國計算機學會服務計算學術會議論文集[C];2011年

相關博士學位論文 前7條

1 劉莉平;動態(tài)Web服務組合關鍵技術研究[D];中南大學;2011年

2 張楊;語義Web服務組合的可信性度量研究[D];重慶大學;2011年

3 董孟高;基于Agent的自適應系統(tǒng)運行機制及其構造技術研究[D];國防科學技術大學;2011年

4 曾慶成;集裝箱碼頭裝卸作業(yè)集成調度模型與方法[D];大連海事大學;2008年

5 杜立新;實時SOA中的服務調度關鍵問題研究[D];山東大學;2012年

6 劉振忠;多軸聯動系統(tǒng)的運動規(guī)劃與結構變形補償[D];天津大學;2012年

7 陳洪龍;面向對象—構件的軟件動態(tài)演化技術研究[D];湖南大學;2011年

相關碩士學位論文 前10條

1 陳昊;基于多Agent自組織的動態(tài)服務組合[D];上海交通大學;2011年

2 賈盼盼;面向QoS的Web服務可信性評價方法研究[D];燕山大學;2010年

3 閆慈;基于強化學習的多機器人氣味源搜索[D];天津大學;2012年

4 李鋒;多智能體Q學習在多AUV協調中的應用與仿真[D];哈爾濱工程大學;2008年

5 饒錫如;基于工作流的服務組合在電子政務系統(tǒng)中的研究及應用[D];重慶大學;2009年

6 付毅;服務網格中信任評估機制研究[D];中南大學;2009年

7 白雙;基于強化學習蟻群算法的主動嗅覺[D];天津大學;2009年

8 馬建威;基于粗粒度需求及服務關鍵屬性的軍事信息服務優(yōu)化組合方法研究[D];國防科學技術大學;2009年

9 劉全銀;基于混合粒子群優(yōu)化的多模型軟測量方法研究與應用[D];蘭州理工大學;2010年

10 方常青;基于語義的Web服務匹配和選擇算法研究[D];中南大學;2010年

【二級參考文獻】

相關期刊論文 前10條

1 趙書強,丁峰,侯子利,曹德玲;自尋優(yōu)模糊電力系統(tǒng)穩(wěn)定器的設計[J];電工技術學報;2004年03期

2 梁有偉,胡志堅,陳允平;基于神經網絡逆系統(tǒng)的電力系統(tǒng)穩(wěn)定器的研究[J];電工技術學報;2004年05期

3 文勁宇,王國興,程時杰,張望;用遺傳算法設計模糊式電力系統(tǒng)穩(wěn)定器[J];電力系統(tǒng)自動化;1999年04期

4 王明東;劉憲林;于繼來;;基于改進遺傳算法的發(fā)電機調速器側模糊PSS優(yōu)化設計[J];繼電器;2006年13期

5 劉楊名;嚴正;胥國毅;;免疫遺傳算法在多機電力系統(tǒng)PSS參數優(yōu)化中的運用[J];繼電器;2007年07期

6 余濤;周斌;甄衛(wèi)國;;強化學習理論在電力系統(tǒng)中的應用及展望[J];電力系統(tǒng)保護與控制;2009年14期

7 高大啟;有教師的線性基本函數前向三層神經網絡結構研究[J];計算機學報;1998年01期

8 孫熙;劉媈哲;焦文品;黃罡;梅宏;;一種規(guī)則驅動的網絡服務組裝機制[J];計算機學報;2006年07期

9 蔣國飛,吳滄浦;基于Q學習算法和BP神經網絡的倒立擺控制[J];自動化學報;1998年05期

10 劉箴;虛擬人的行為規(guī)劃模型研究[J];系統(tǒng)仿真學報;2004年10期

【相似文獻】

相關期刊論文 前10條

1 李冰洋;王慧強;馮光升;;自律入侵容忍系統(tǒng)的模型構建與量化分析[J];計算機應用研究;2009年05期

2 吳慶濤;華彬;鄭瑞娟;魏汪洋;張明川;;基于自律計算的入侵容忍模型[J];計算機應用;2010年09期

3 趙生慧;吳國新;陳桂林;陳海寶;;增強Web服務可信性的服務選擇方法[J];通信學報;2011年01期

4 馬會彬;趙曉南;李戰(zhàn)懷;;具有自律特征的網絡故障管理框架[J];微電子學與計算機;2006年08期

5 劉文潔;李戰(zhàn)懷;;一種基于自律計算的性能監(jiān)視工具[J];微電子學與計算機;2008年03期

6 王慧強;徐俊波;馮光升;王振東;陳曉明;;認知網絡體系結構研究新進展[J];計算機科學;2011年08期

7 趙艷平;姜子運;;基于EKF的神經網絡在網絡流量預測中的應用[J];蘭州交通大學學報;2009年06期

8 ;[J];;年期

9 ;[J];;年期

10 ;[J];;年期

相關碩士學位論文 前5條

1 江國朝;基于Policy的自律網絡資源管理系統(tǒng)的研究與實現[D];西北工業(yè)大學;2006年

2 易惠芳;事件實時記錄與分析技術研究與實現[D];哈爾濱工程大學;2009年

3 曹繼邦;基于自律計算的主動入侵檢測研究[D];河南科技大學;2012年

4 華彬;基于自律計算的入侵容忍策略及方法研究[D];河南科技大學;2011年

5 劉彬;自律入侵容忍模型及其評估策略研究[D];河南科技大學;2012年

，

本文編號：2436536