【摘要】：提出了一種分散式多智能體均衡算法(decentralized correlated equilibrium Q(?),DCEQ(λ))以解決新能源接入所帶來的強隨機環(huán)境下的互聯(lián)電網(wǎng)自動發(fā)電控制。該算法以相關(guān)均衡概率選擇機制平衡利用與探索,是一種典型的試錯尋優(yōu)且與模型無關(guān)的智能算法。在綜合考慮分散式多智能體均衡算法在自動發(fā)電控制(automatic generation control,AGC)系統(tǒng)設(shè)計適用性的基礎(chǔ)上,改進了多智能體算法的獎勵函數(shù);以區(qū)域控制偏差(area control error,ACE)實時絕對值賦予公平系數(shù)的方法設(shè)計了均衡選擇函數(shù);在分析了3種常用資格跡算法特點的基礎(chǔ)上,融入了SARSA(λ)資格跡以有效解決火電機組等大延時環(huán)節(jié)所帶來的時間信度分配問題。IEEE標準兩區(qū)域頻率響應(yīng)模型與南方電網(wǎng)模型仿真研究表明,所提出的DCEQ(λ)控制器相對于單智能體Q(λ)控制器具有更好的控制性能,在控制過程中能有效消除ACE與控制性能標準(control performance standard,CPS)中的實時毛刺,顯著提高互聯(lián)電力系統(tǒng)的穩(wěn)定性與魯棒性。
[Abstract]:A decentralized multi-agent equalization algorithm, (decentralized correlated equilibrium Q (?), DCEQ (位, is proposed to solve the problem of automatic generation control of interconnected power grid under strong stochastic environment brought by new energy access. This algorithm is a typical model independent intelligent algorithm which uses and explores the correlation equilibrium probability selection mechanism. On the basis of considering the applicability of decentralized multi-agent equalization algorithm in the design of automatic generation control (automatic generation control,AGC) system, the reward function of multi-agent algorithm is improved. The equalization selection function is designed by using the real time absolute value of the region control deviation (area control error,ACE) to assign fair coefficient, and on the basis of analyzing the characteristics of three common qualification trace algorithms, SARSA (位) qualification trace is incorporated to solve the problem of time reliability allocation brought by large delay links such as thermal power generation units. The simulation results of the IEEE standard two-region frequency response model and the Southern Power Grid model show that, The proposed DCEQ (位) controller has better control performance than the single agent Q (位) controller. It can effectively eliminate the real time burr in ACE and control performance standard (control performance standard,CPS, and improve the stability and robustness of interconnected power system.
【作者單位】： 華南理工大學電力學院;廣東電網(wǎng)公司韶關(guān)供電局;
【基金】：國家高技術(shù)研究發(fā)展計劃(863計劃)(2012AA050209) 國家自然科學基金項目(51177051) 中國南方電網(wǎng)科技項目資助~~
【分類號】：TM76

【參考文獻】

相關(guān)期刊論文 前9條

1 余濤;周斌;陳家榮;;基于多步回溯Q(λ)學習的互聯(lián)電網(wǎng)隨機最優(yōu)CPS控制[J];電工技術(shù)學報;2011年06期

2 高宗和,滕賢亮,涂力群;互聯(lián)電網(wǎng)AGC分層控制與CPS控制策略[J];電力系統(tǒng)自動化;2004年01期

3 伍永剛,王定一;基于遺傳算法的梯級水電廠自動發(fā)電控制算法研究[J];電網(wǎng)技術(shù);2000年03期

4 李濱;韋化;農(nóng)蔚濤;李林峰;吳阿琴;陽育德;;基于現(xiàn)代內(nèi)點理論的互聯(lián)電網(wǎng)控制性能評價標準下的AGC控制策略[J];中國電機工程學報;2008年25期

5 余濤;周斌;陳家榮;;基于Q學習的互聯(lián)電網(wǎng)動態(tài)最優(yōu)CPS控制[J];中國電機工程學報;2009年19期

6 張麗英;葉廷路;辛耀中;韓豐;范高鋒;;大規(guī)模風電接入電網(wǎng)的相關(guān)問題及措施[J];中國電機工程學報;2010年25期

7 卓峻峰;楊小煜;周京陽;李立新;尚學偉;王贊;;基于模糊預(yù)測控制的AGC自適應(yīng)控制器設(shè)計[J];中國電機工程學報;2010年S1期

8 余濤;王宇名;葉文加;劉前進;;基于改進分層強化學習的CPS指令多目標動態(tài)優(yōu)化分配算法[J];中國電機工程學報;2011年19期

9 司風琪;顧慧;葉亞蘭;汪軍;徐治皋;;基于混沌粒子群算法的火電廠廠級負荷在線優(yōu)化分配[J];中國電機工程學報;2011年26期

【共引文獻】

相關(guān)期刊論文 前10條

1 馬耀飛;龔光紅;彭曉源;;基于強化學習的航空兵認知行為模型[J];北京航空航天大學學報;2010年04期

2 張瑞陽;李小軍;宋莉;;南方電網(wǎng)2007年CPS參數(shù)調(diào)整分析與計算[J];東北電力大學學報(自然科學版);2008年02期

3 羅云霞,周慕遜,江振東,陳永寶;基于改進遺傳算法的串聯(lián)小水電群優(yōu)化調(diào)度[J];水電自動化與大壩監(jiān)測;2004年03期

4 余濤;周斌;陳家榮;;基于多步回溯Q(λ)學習的互聯(lián)電網(wǎng)隨機最優(yōu)CPS控制[J];電工技術(shù)學報;2011年06期

5 余濤;劉靖;胡細兵;;基于分布式多步回溯Q(λ)學習的復(fù)雜電網(wǎng)最優(yōu)潮流算法[J];電工技術(shù)學報;2012年04期

6 ;Achievements and Prospects of Wind Power Prediction[J];Electricity;2011年05期

7 林章歲;羅利群;;福建省風電出力特性及其對電網(wǎng)的影響分析[J];電力建設(shè);2011年12期

8 孫偉卿;王承民;張焰;;智能電網(wǎng)中的柔性負荷[J];電力需求側(cè)管理;2012年03期

9 徐武祥;CPS標準在云南電網(wǎng)AGC中的應(yīng)用[J];電力系統(tǒng)自動化;2005年17期

10 高宗和,滕賢亮,張小白;互聯(lián)電網(wǎng)CPS標準下的自動發(fā)電控制策略[J];電力系統(tǒng)自動化;2005年19期

相關(guān)會議論文 前7條

1 白曉清;韋化;陳英杰;黃鋒;;電動汽車與智能電網(wǎng)雙向互動的動態(tài)經(jīng)濟調(diào)度[A];第十四屆中國科協(xié)年會第19分會場：電動汽車充放電技術(shù)研討會論文集[C];2012年

2 梅亞東;;水庫調(diào)度研究的若干進展[A];水電站梯級調(diào)度及自動控制技術(shù)研討會論文集[C];2008年

3 伍永剛;;水電廠AGC策略與技術(shù)實現(xiàn)[A];中國水力發(fā)電工程學會信息化專委會2008年學術(shù)交流會論文集[C];2008年

4 顧慧;郭振宇;劉偉;司風琪;徐治皋;;禁忌粒子群算法在熱電聯(lián)產(chǎn)負荷經(jīng)濟分配和短期發(fā)電計劃中的應(yīng)用[A];2012電站自動化信息化學術(shù)和技術(shù)交流會議論文集[C];2012年

5 姚駿;劉奧林;李清;陳知前;杜紅彪;;飛輪輔助永磁直驅(qū)風電系統(tǒng)不對稱電網(wǎng)故障穿越控制[A];2013年中國電機工程學會年會論文集[C];2013年

6 宋曉芳;周玲;薛峰;;多源并存系統(tǒng)外送工況下的暫態(tài)穩(wěn)定控制[A];2013年中國電機工程學會年會論文集[C];2013年

7 Zhou Min;Zhang Lei;Zhao Xu Sen;;The Research for Doubly Salient Generator Voltage Regulator based on TMS320F240[A];第30屆全國化學與物理電源學術(shù)年會論文集[C];2013年

相關(guān)博士學位論文 前10條

1 張伯松;中國風電產(chǎn)業(yè)融資問題研究[D];中國地質(zhì)大學（北京）;2011年

2 劉道偉;廣域環(huán)境下的電網(wǎng)靜態(tài)穩(wěn)定性能態(tài)勢評估研究[D];山東大學;2011年

3 易仕敏;電力市場和節(jié)能調(diào)度環(huán)境下電力系統(tǒng)調(diào)度與安全問題的研究[D];華南理工大學;2011年

4 楊勇;節(jié)能發(fā)電調(diào)度模式下梯級電站優(yōu)化調(diào)度研究[D];西南交通大學;2010年

5 李紅梅;智能優(yōu)化方法在電力系統(tǒng)調(diào)頻中的應(yīng)用研究[D];上海交通大學;2011年

6 徐一帆;天基海洋移動目標監(jiān)視的聯(lián)合調(diào)度問題研究[D];國防科學技術(shù)大學;2011年

7 游進軍;水資源系統(tǒng)模擬理論與實踐[D];中國水利水電科學研究院;2005年

8 宋梅萍;結(jié)合圍捕問題的合作多智能體強化學習研究[D];哈爾濱工程大學;2005年

9 沈晶;分層強化學習方法研究[D];哈爾濱工程大學;2006年

10 向馗;復(fù)雜系統(tǒng)的模式發(fā)現(xiàn)[D];浙江大學;2006年

相關(guān)碩士學位論文 前10條

1 伊婧;基于強化學習的機器人行為學習[D];沈陽工業(yè)大學;2011年

2 鄭艷麗;新型AB庫潮汐電站自適應(yīng)調(diào)度技術(shù)的研究[D];杭州電子科技大學;2011年

3 于文俊;變論域模糊控制算法在電力系統(tǒng)中的應(yīng)用[D];華南理工大學;2011年

4 文麗;互聯(lián)電網(wǎng)分級調(diào)頻模式研究[D];華南理工大學;2011年

5 甄衛(wèi)國;基于強化學習的PSS最優(yōu)控制策略的研究[D];華南理工大學;2011年

6 袁野;基于強化學習算法的互聯(lián)電網(wǎng)AGC隨機最優(yōu)控制[D];華南理工大學;2011年

7 胡細兵;基于強化學習算法的最優(yōu)潮流研究[D];華南理工大學;2011年

8 楊海珊;基于人工神經(jīng)網(wǎng)絡(luò)的風電系統(tǒng)建模及其應(yīng)用研究[D];天津理工大學;2011年

9 問虎龍;風電系統(tǒng)電壓穩(wěn)定性的多參數(shù)靜分岔研究[D];天津理工大學;2011年

10 吳耀華;大規(guī)模風電場接入對電網(wǎng)電壓的影響分析[D];華北電力大學;2011年

【二級參考文獻】

相關(guān)期刊論文 前10條

1 劉夢欣;王杰;陳陳;;電力系統(tǒng)頻率控制理論與發(fā)展[J];電工技術(shù)學報;2007年11期

2 徐琰,朱翠蘭,曾偉民;華中電網(wǎng)AGC分層控制模式的探討[J];電力系統(tǒng)自動化;2000年22期

3 高宗和;自動發(fā)電控制算法的幾點改進[J];電力系統(tǒng)自動化;2001年22期

4 高宗和,滕賢亮,涂力群;互聯(lián)電網(wǎng)AGC分層控制與CPS控制策略[J];電力系統(tǒng)自動化;2004年01期

5 高宗和,滕賢亮,張小白;互聯(lián)電網(wǎng)CPS標準下的自動發(fā)電控制策略[J];電力系統(tǒng)自動化;2005年19期

6 李紅梅;嚴正;;具有先驗知識的Q學習算法在AGC中的應(yīng)用[J];電力系統(tǒng)自動化;2008年23期

7 李濱;韋化;農(nóng)蔚濤;崔長江;陽育德;;互聯(lián)電網(wǎng)CPS下AGC控制參數(shù)的優(yōu)化[J];電力系統(tǒng)自動化;2009年18期

8 朱敏,王定一;電力系統(tǒng)中梯級水電站實時優(yōu)化運行控制新算法[J];電力系統(tǒng)自動化;1997年04期

9 周京陽,于爾鏗;能量管理系統(tǒng)(EMS) 第5講 自動發(fā)電控制[J];電力系統(tǒng)自動化;1997年05期

10 左浩,陳昆薇,洪潮,孔峰;機組負荷最優(yōu)分配的改進遺傳算法[J];電力系統(tǒng)及其自動化學報;2001年02期

【相似文獻】

相關(guān)期刊論文 前10條

1 張志剛;游義剛;;Repast競價策略模型在電力市場教學中的研究[J];中國電力教育;2011年12期

2 孫晟;王世進;奚立峰;;基于強化學習的模式驅(qū)動調(diào)度系統(tǒng)研究[J];計算機集成制造系統(tǒng);2007年09期

3 余濤;周斌;;基于強化學習的互聯(lián)電網(wǎng)CPS自校正控制[J];電力系統(tǒng)保護與控制;2009年10期

4 余濤;周斌;甄衛(wèi)國;;強化學習理論在電力系統(tǒng)中的應(yīng)用及展望[J];電力系統(tǒng)保護與控制;2009年14期

5 汪德星,楊立兵;自動發(fā)電控制(AGC)技術(shù)在華東電力系統(tǒng)中的應(yīng)用[J];華東電力;2005年01期

6 陳超;何光宇;劉敦楠;;基于CPS標準的輔助分析系統(tǒng)研究[J];上海電力學院學報;2008年01期

7 余濤;陳亮;蔡廣林;;基于CPS統(tǒng)計信息自學習機理的AGC自適應(yīng)控制[J];中國電機工程學報;2008年10期

8 張瑞陽;李小軍;宋莉;;南方電網(wǎng)2007年CPS參數(shù)調(diào)整分析與計算[J];東北電力大學學報(自然科學版);2008年02期

9 賈德香;程浩忠;熊虎崗;范宏;陳明;馬鴻杰;;考慮控制性能標準的AGC機組經(jīng)濟補償研究[J];中國電機工程學報;2007年31期

10 李作麗;;基于CPS標準的自動發(fā)電控制的探討[J];英才高職論壇;2007年01期

相關(guān)會議論文 前10條

1 敬斌;田野;;Robocup中的傳球策略[A];2005中國機器人大賽論文集[C];2005年

2 徐宏雷;鄭偉;智勇;;水電廠自動發(fā)電控制技術(shù)在我國的應(yīng)用[A];水電站機電技術(shù)研討會論文集[C];2010年

3 張偉;李建更;張家旺;;多智能體強化學習在機器人足球比賽中的應(yīng)用[A];2005年中國智能自動化會議論文集[C];2005年

4 方寶富;王浩;姚宏亮;楊靜;周晉;;Q學習在機器人足球中的應(yīng)用[A];2004中國機器人足球比賽暨學術(shù)研討會論文集[C];2004年

5 葉道年;陳衛(wèi)東;;機器人團隊協(xié)作的強化學習[A];2004中國機器人足球比賽暨學術(shù)研討會論文集[C];2004年

6 張家旺;韓光勝;張偉;;基于ASPL模型的多智能體強化學習在RoboCup中的應(yīng)用[A];2005中國機器人大賽論文集[C];2005年

7 王建平;田世佑;葉偉;;智能體建模方法研究[A];第13屆中國系統(tǒng)仿真技術(shù)及其應(yīng)用學術(shù)年會論文集[C];2011年

8 周玉潔;劉世林;文勁宇;;飛輪儲能輔助的含風電電力系統(tǒng)自動發(fā)電控制[A];第十三屆中國科協(xié)年會第15分會場-大規(guī)模儲能技術(shù)的發(fā)展與應(yīng)用研討會論文集[C];2011年

9 遲妍;譚躍進;;基于知識表示的作戰(zhàn)智能體模型描述研究[A];Well-off Society Strategies and Systems Engineering--Proceedings of the 13th Annual Conference of System Engineering Society of China[C];2004年

10 趙濤;;自動發(fā)電控制(AGC)在黃河水電公司梯級電站間的應(yīng)用[A];水電站梯級調(diào)度及自動控制技術(shù)研討會論文集[C];2008年

相關(guān)重要報紙文章 前10條

1 孫佳宇;強化學習教育 增強服務(wù)意識[N];人民公安報;2009年

2 王良豪 記者 劉偉 龍先華;通過創(chuàng)新工作取得活動效果[N];六盤水日報;2008年

3 首席記者 朱麗華;強化學習 落實責任 確保取得實效[N];盤錦日報;2009年

4 書分;解放區(qū)審計局強化學習抓作風[N];焦作日報;2006年

5 記者 劉琰;強化學習 增強本領(lǐng) 扎實工作[N];周口日報;2009年

6 譚育才;強化學習 克己奉公[N];赤峰日報;2008年

7 章斌、特約記者夏吉龍;8710部隊 破解難題強化學習教育效果[N];人民武警;2010年

8 李磊;讓電子政務(wù)更聰明[N];計算機世界;2001年

9 通訊員 馬全有;強化學習 搞好服務(wù) 解放思想[N];甘肅法制報;2007年

10 李北川;強化學習 找準問題 著力整改[N];涼山日報(漢);2007年

相關(guān)博士學位論文 前10條

1 仲宇;分布式強化學習理論及在多機器人中的應(yīng)用研究[D];哈爾濱工程大學;2003年

2 金釗;加速強化學習方法研究[D];云南大學;2010年

3 張峰;正倒向系統(tǒng)相關(guān)的偏微分方程與隨機最優(yōu)控制問題[D];山東大學;2009年

4 戴朝暉;基于混合抽象機制的多智能體系統(tǒng)動態(tài)分層強化學習算法研究[D];中南大學;2012年

5 徐明亮;強化學習及其應(yīng)用研究[D];江南大學;2010年

6 陳學松;強化學習及其在機器人系統(tǒng)中的應(yīng)用研究[D];廣東工業(yè)大學;2011年

7 李紅梅;智能優(yōu)化方法在電力系統(tǒng)調(diào)頻中的應(yīng)用研究[D];上海交通大學;2011年

8 馮駒;擬哈密頓系統(tǒng)非線性隨機最優(yōu)控制的若干問題研究[D];浙江大學;2011年

9 羅銀淼;基于隨機平均法的非線性系統(tǒng)隨機響應(yīng)與最優(yōu)控制的試驗和應(yīng)用研究[D];浙江大學;2011年

10 王維峰;隨機最優(yōu)控制問題必要條件及其相關(guān)問題的研究[D];華中科技大學;2013年

相關(guān)碩士學位論文 前10條

1 汪向利;基于多Agent的生產(chǎn)計劃與調(diào)度系統(tǒng)研究與開發(fā)[D];浙江工業(yè)大學;2006年

2 錢征;基于強化學習的倒立擺控制研究[D];北京工業(yè)大學;2005年

3 肖莉;強化學習及其在協(xié)同虛擬環(huán)境導航知識中的應(yīng)用研究[D];湖南師范大學;2009年

4 胡子嬰;基于智能體系統(tǒng)的Q-學習算法的研究與改進[D];哈爾濱理工大學;2007年

5 張馳;基于ROBOCUP的多智能體系統(tǒng)設(shè)計與實現(xiàn)[D];北京工業(yè)大學;2004年

6 梅昊;群體機器人系統(tǒng)協(xié)同適應(yīng)性研究[D];吉林大學;2007年

7 郭葉軍;機器人足球仿真比賽中多智能體系統(tǒng)的構(gòu)建[D];浙江大學;2004年

8 尹曉虎;多Agent協(xié)同的強化學習方法研究[D];國防科學技術(shù)大學;2003年

9 李玲;虛擬駕駛模型與環(huán)境自適應(yīng)技術(shù)的研究[D];沈陽工業(yè)大學;2009年

10 尹香花;基于強化學習的多機器人行為式隊形控制策略研究[D];吉林大學;2009年

，

本文編號：2290665