一種基于憶阻激活函數(shù)的遞歸神經(jīng)網(wǎng)絡(luò)及其聯(lián)想記憶
本文選題:遞歸神經(jīng)網(wǎng)絡(luò) + 憶阻器 ; 參考:《中國(guó)科學(xué):信息科學(xué)》2017年09期
【摘要】:遞歸神經(jīng)網(wǎng)絡(luò)是一種非線性動(dòng)力系統(tǒng),被廣泛應(yīng)用在聯(lián)想記憶.遞歸神經(jīng)網(wǎng)絡(luò)的激活函數(shù)是典型的分段線性函數(shù),其硬件實(shí)現(xiàn)繁瑣.憶阻器是非線性的動(dòng)態(tài)納米級(jí)器件,將其用于神經(jīng)網(wǎng)絡(luò),可以實(shí)現(xiàn)低功耗、易擴(kuò)展的憶阻激活函數(shù)電路.本文利用憶阻器磁通量和電荷之間的關(guān)系特性,提出了一種基于憶阻激活函數(shù)的遞歸神經(jīng)網(wǎng)絡(luò),并將其應(yīng)用到聯(lián)想記憶中.首先,利用憶阻器設(shè)計(jì)出二值、三值憶阻激活函數(shù),為遞歸神經(jīng)網(wǎng)絡(luò)集成電路的實(shí)現(xiàn)提供了有效的方法.其次,加入矩陣轉(zhuǎn)移函數(shù),提出了一種基于憶阻激活函數(shù)的遞歸神經(jīng)網(wǎng)絡(luò)模型.最后,實(shí)現(xiàn)了二值、三值靜態(tài)圖像的自聯(lián)想記憶和異聯(lián)想記憶,并且通過(guò)仿真實(shí)現(xiàn)了字母圖像中的字母移動(dòng),因而實(shí)現(xiàn)動(dòng)態(tài)圖像的聯(lián)想記憶.該研究能簡(jiǎn)化遞歸神經(jīng)網(wǎng)絡(luò)集成電路,并且為實(shí)現(xiàn)記憶視頻運(yùn)動(dòng)提供新的有效途徑.
[Abstract]:Recursive neural network is a nonlinear dynamic system, which is widely used in associative memory. The activation function of recurrent neural network is a typical piecewise linear function. The resistor is a nonlinear dynamic nano-scale device, which can be used in neural network to realize low power consumption and easy to extend the circuit of memory activation function. Based on the relationship between magnetic flux and charge, a recursive neural network based on memory activation function is proposed and applied to associative memory. Firstly, the binary and ternary mnemonic activation functions are designed by means of a resistive device, which provides an effective method for the realization of the integrated circuit of recurrent neural network. Secondly, a recursive neural network model based on memory activation function is proposed by adding matrix transfer function. Finally, the self-associative memory and the hetero-associative memory of the binary and ternary still images are realized, and the letter movement in the alphabetic image is realized by simulation, so the associative memory of the dynamic image is realized. This research can simplify the integrated circuit of recurrent neural network and provide a new effective way to realize the motion of memory video.
【作者單位】: 非線性電路與智能信息處理重慶市重點(diǎn)實(shí)驗(yàn)室;西南大學(xué)電子信息工程學(xué)院;
【基金】:國(guó)家自然科學(xué)基金(批準(zhǔn)號(hào):61372139,61571372,61672436) 中央高;究蒲袠I(yè)務(wù)費(fèi)專(zhuān)項(xiàng)資金(批準(zhǔn)號(hào):XDJK2016A001)資助項(xiàng)目
【分類(lèi)號(hào)】:TP183
【相似文獻(xiàn)】
相關(guān)期刊論文 前10條
1 溫廣瑞,屈梁生,張西寧;基于遞歸神經(jīng)網(wǎng)絡(luò)的多步預(yù)報(bào)方法[J];西安交通大學(xué)學(xué)報(bào);2002年07期
2 金仁貴;;帶有偏差單元的遞歸神經(jīng)網(wǎng)絡(luò)在故障診斷方面的應(yīng)用[J];電腦知識(shí)與技術(shù);2006年29期
3 陳鋼;王占山;;連續(xù)時(shí)間遞歸神經(jīng)網(wǎng)絡(luò)的穩(wěn)定性分析[J];沈陽(yáng)理工大學(xué)學(xué)報(bào);2007年02期
4 汪曉夢(mèng);;帶有偏差單元的遞歸神經(jīng)網(wǎng)絡(luò)在故障診斷方面的應(yīng)用優(yōu)化[J];甘肅聯(lián)合大學(xué)學(xué)報(bào)(自然科學(xué)版);2010年05期
5 杜艷可;徐瑞;;具有時(shí)滯的遞歸神經(jīng)網(wǎng)絡(luò)動(dòng)力學(xué)研究進(jìn)展[J];北華大學(xué)學(xué)報(bào)(自然科學(xué)版);2012年01期
6 蔣洪睿,莫瑋,李麗;遞歸神經(jīng)網(wǎng)絡(luò)自適應(yīng)均衡抗突發(fā)干擾研究[J];電訊技術(shù);2000年01期
7 宋軼民,余躍慶,張策,馬文貴;動(dòng)態(tài)遞歸神經(jīng)網(wǎng)絡(luò)及其在機(jī)敏機(jī)構(gòu)辨識(shí)中的應(yīng)用[J];機(jī)械科學(xué)與技術(shù);2001年04期
8 張奇志,賈永樂(lè),周雅莉;噪聲有源控制的遞歸神經(jīng)網(wǎng)絡(luò)方法[J];控制與決策;2001年03期
9 李峰,李樹(shù)榮;基于動(dòng)態(tài)遞歸神經(jīng)網(wǎng)絡(luò)的動(dòng)態(tài)矩陣控制[J];石油大學(xué)學(xué)報(bào)(自然科學(xué)版);2001年03期
10 唐普英,李紹榮,黃順吉;一種新的復(fù)值遞歸神經(jīng)網(wǎng)絡(luò)訓(xùn)練方法及其應(yīng)用[J];信號(hào)處理;2001年06期
相關(guān)會(huì)議論文 前10條
1 房毅憲;王寶文;王永茂;;基于偏差遞歸神經(jīng)網(wǎng)絡(luò)的股價(jià)預(yù)測(cè)(英文)[A];計(jì)算機(jī)技術(shù)與應(yīng)用進(jìn)展——全國(guó)第17屆計(jì)算機(jī)科學(xué)與技術(shù)應(yīng)用(CACIS)學(xué)術(shù)會(huì)議論文集(上冊(cè))[C];2006年
2 劉勇;沈毅;胡恒章;;遞歸神經(jīng)網(wǎng)絡(luò)自適應(yīng)濾波器[A];1998年中國(guó)智能自動(dòng)化學(xué)術(shù)會(huì)議論文集(上冊(cè))[C];1998年
3 趙英凱;蔡寧;;基于對(duì)角遞歸神經(jīng)網(wǎng)絡(luò)的肟化投酮量在線預(yù)估[A];1998年中國(guó)智能自動(dòng)化學(xué)術(shù)會(huì)議論文集(上冊(cè))[C];1998年
4 李樹(shù)榮;李峰;;基于動(dòng)態(tài)遞歸神經(jīng)網(wǎng)絡(luò)的非線性系統(tǒng)重構(gòu)[A];1998年中國(guó)控制會(huì)議論文集[C];1998年
5 史志偉;韓敏;;應(yīng)用遞歸神經(jīng)網(wǎng)絡(luò)建立非線性結(jié)構(gòu)系統(tǒng)模型[A];第二十三屆中國(guó)控制會(huì)議論文集(下冊(cè))[C];2004年
6 叢爽;戴誼;;遞歸神經(jīng)網(wǎng)絡(luò)逼近性能的研究[A];'2006系統(tǒng)仿真技術(shù)及其應(yīng)用學(xué)術(shù)交流會(huì)論文集[C];2006年
7 呂進(jìn);郭晨;劉雨;;基于不完全遞歸神經(jīng)網(wǎng)絡(luò)的二階導(dǎo)數(shù)多步預(yù)測(cè)模糊控制及應(yīng)用[A];2007年中國(guó)智能自動(dòng)化會(huì)議論文集[C];2007年
8 蒲興成;;時(shí)變時(shí)滯不確定遞歸神經(jīng)網(wǎng)絡(luò)漸近穩(wěn)定的一個(gè)充分條件[A];2008’“先進(jìn)集成技術(shù)”院士論壇暨第二屆儀表、自動(dòng)化與先進(jìn)集成技術(shù)大會(huì)論文集[C];2008年
9 仉寶玉;吳志敏;;基于對(duì)角遞歸神經(jīng)網(wǎng)絡(luò)的智能PID控制[A];'2003系統(tǒng)仿真技術(shù)及其應(yīng)用學(xué)術(shù)交流會(huì)論文集[C];2003年
10 沈艷;謝美萍;;基于遞歸神經(jīng)網(wǎng)絡(luò)的船舶運(yùn)動(dòng)極短期建模預(yù)報(bào)[A];第二屆全國(guó)信息獲取與處理學(xué)術(shù)會(huì)議論文集[C];2004年
相關(guān)博士學(xué)位論文 前10條
1 趙永昌;一類(lèi)時(shí)滯靜態(tài)遞歸神經(jīng)網(wǎng)絡(luò)的動(dòng)力學(xué)行為研究[D];中國(guó)海洋大學(xué);2010年
2 高海賓;擾動(dòng)作用下遞歸神經(jīng)網(wǎng)絡(luò)穩(wěn)定性研究[D];燕山大學(xué);2006年
3 黃玉嬌;具有廣義分段線性激活函數(shù)的遞歸神經(jīng)網(wǎng)絡(luò)的多穩(wěn)定性分析[D];東北大學(xué);2014年
4 劉振偉;基于時(shí)滯重構(gòu)方法的動(dòng)態(tài)系統(tǒng)穩(wěn)定性與反饋控制研究[D];東北大學(xué);2015年
5 徐東坡;遞歸神經(jīng)網(wǎng)絡(luò)梯度學(xué)習(xí)算法的收斂性[D];大連理工大學(xué);2009年
6 于佳麗;遞歸神經(jīng)網(wǎng)絡(luò)的連續(xù)吸引子與模糊控制[D];電子科技大學(xué);2009年
7 王芬;遞歸神經(jīng)網(wǎng)絡(luò)的動(dòng)力學(xué)行為分析[D];武漢科技大學(xué);2011年
8 季策;時(shí)滯遞歸神經(jīng)網(wǎng)絡(luò)的動(dòng)態(tài)特性研究[D];東北大學(xué);2005年
9 徐軍;遞歸神經(jīng)網(wǎng)絡(luò)穩(wěn)定性分析[D];浙江大學(xué);2007年
10 張銳;幾類(lèi)遞歸神經(jīng)網(wǎng)絡(luò)的穩(wěn)定性及其應(yīng)用研究[D];東北大學(xué);2010年
相關(guān)碩士學(xué)位論文 前10條
1 柳玉華;一種遞歸神經(jīng)網(wǎng)絡(luò)方法研究及其在非線性系統(tǒng)跟蹤控制中的應(yīng)用[D];江西理工大學(xué);2015年
2 羅威威;全局指數(shù)穩(wěn)定的遞歸神經(jīng)網(wǎng)絡(luò)的魯棒性分析[D];中國(guó)礦業(yè)大學(xué);2015年
3 楊渺渺;具有時(shí)滯的遞歸神經(jīng)網(wǎng)絡(luò)穩(wěn)定性分析[D];電子科技大學(xué);2015年
4 李克強(qiáng);基于Spark的大規(guī)模RNNLM系統(tǒng)[D];江蘇大學(xué);2016年
5 謝偉浩;基于多尺度時(shí)間遞歸神經(jīng)網(wǎng)絡(luò)的人群異常檢測(cè)[D];廣東工業(yè)大學(xué);2016年
6 曹成遠(yuǎn);基于深度學(xué)習(xí)的蛋白質(zhì)殘基相互作用預(yù)測(cè)[D];蘇州大學(xué);2016年
7 王瑞剛;基于遞歸神經(jīng)網(wǎng)絡(luò)的英文手寫(xiě)輸入法的設(shè)計(jì)與實(shí)現(xiàn)[D];哈爾濱工業(yè)大學(xué);2016年
8 徐佩;Clifford遞歸神經(jīng)網(wǎng)絡(luò)的全局穩(wěn)定性[D];浙江師范大學(xué);2016年
9 金留可;基于遞歸神經(jīng)網(wǎng)絡(luò)的生物醫(yī)學(xué)命名實(shí)體識(shí)別[D];大連理工大學(xué);2016年
10 盛銀;遞歸神經(jīng)網(wǎng)絡(luò)的穩(wěn)定性分析[D];華中科技大學(xué);2015年
,本文編號(hào):1889304
本文鏈接:http://sikaile.net/kejilunwen/zidonghuakongzhilunwen/1889304.html