收藏本站
《兰州大学》 2006年
收藏 | 手机打开
二维码
手机客户端打开本文

神经元传输函数和网络噪音对联想记忆反馈网络动力学特性的影响

王瑞敏  
【摘要】: 反馈神经网络的突出特点是具有联想记忆功能,易于硬件实现,因此在诸多领域得到非常广泛的应用。同时,反馈神经网络作为一类典型的高维非线性动力学系统,引起了非线性动力学领域的科研工作者的高度关注。一方面,我们可以应用非线性动力学近年来的研究成果理解网络的特性、提高网络的功能,另一方面,反馈网络本身具有丰富的动力学特性和现象,因而为这一领域提供了一个研究高维动力学系统复杂行为的典型模型。 本学位论文从反馈神经网络的吸引子所对应的局域场分布入手来研究网络结构与网络性能之间的关联性,表明网络的特性主要决定于记忆模式吸引子的局域场分布,同时也会受到神经元传输函数的影响,而传输函数的影响效果又和局域场分布密切相关。本文重点研究两种反馈网络,一类是基于Hebb规则设计的Hopfield神经网络,另一类是基于最近提出的一套设计神经网络的整体规则[Zhao,Phys.Rev.E,70,066137(2004)]。两种网络中,记忆模式吸引子的局域场和伪记忆模式吸引子的局域场分布在不同的区域,但重叠程度各不相同,根据这一现象,提出了传输函数以及随机噪音影响网络性能的机制。研究结果表明,连续传输函数的应用的确如以前的研究者发现的那样可以在一定程度上消除网络的伪吸引子,但是消除并不彻底;消除伪吸引子的根本方法还在于利用整体设计方法控制记忆模式吸引子对应的局域场的分布,只要分布合适,伪吸引子就可以完全不出现。一般认为连续传输函数中增益因子的作用和温度,也就是和网络中的随机噪音具有一定的相似性,有些研究者虽然也指出了两者的不同,但是详细的分析和机制并未搞清楚。本论文的另一个重点是详细分析增益因子和噪音起作用的方式,搞清楚了它们的相同和不同之处,并因此指出如何更好地利用噪音改善网络的性能。同时,为了深入理解网络结构与网络性能的联系,本文也研究了网络权值矩阵本征值谱在特定的设计规则下随设计参数的变化情况,比较了本征值谱与随机矩阵本征值谱的偏离。本文各章安排如下: 第一章简要介绍了神经网络的研究背景,包括神经网络的起源、发展、类型,以及对神经网络理论研究作出显著贡献的一些物理学家的工作,如Gardner,Little等人的工作做了简要介绍。 第二章详细介绍了两种具有联想记忆的反馈神经网络,一种是著名的Hopfield网络,另外一种是最近由赵鸿教授提出的整体优化网络,介绍了两种方法的具体实现算法以及这两种网络的一些主要特性和动力学行为。 第三章研究连续传输函数对联想记忆反馈神经网络功能的影响。给出了不同规则设计下记忆模式吸引子和伪吸引子对应的局域场分布,提出局域场分布特征决定神经元传输函数的作用,给出传输函数影响网络性能和动力学行为的机制。 第四章研究噪音对联想记忆神经网络功能的影响。在神经网络动力学演化方程中加入噪音来考察网络的动力学特性以及功能的改善,说明噪音的作用取决于两种吸引子也就是记忆模式吸引子和伪吸引子对应的局域场分布,同时给出如何利用噪音提高和改善网络的性能。 第五章研究神经网络中的本征值谱。由于加入设计信息,使得网络的权值矩阵对随机矩阵有偏离,因此其本征值谱也表现出一些有趣的行为。这一章初探性的研究试图将随机矩阵理论与神经网络研究在一定的程度上结合起来,研究本征值谱对随机矩阵本征值谱的偏离,能帮助更深入理解神经网络中复杂的动力学特性。
【学位授予单位】:兰州大学
【学位级别】:博士
【学位授予年份】:2006
【分类号】:O233;O415.6

手机知网App
【引证文献】
中国硕士学位论文全文数据库 前1条
1 郑鸿宇;复杂生物神经网络的建模及其动力学特性研究[D];广西师范大学;2008年
【参考文献】
中国博士学位论文全文数据库 前1条
1 金涛;非对称神经网在模式识别中的应用[D];兰州大学;2006年
【共引文献】
中国期刊全文数据库 前10条
1 梁学斌;;离散Hopfield神经网络的统一描述[J];安徽大学学报(自然科学版);1993年02期
2 ;Dynamics of firing patterns,synchronization and resonances in neuronal electrical activities:experiments and analysis[J];Acta Mechanica Sinica;2008年06期
3 高志明,关岩,于洪梅,吴秀红,李井会;人工神经网络在化学中的应用进展[J];鞍山钢铁学院学报;2000年03期
4 刘军,兰家隆,王兆明;应用神经网络解决连线总长最短的门阵列布局算法[J];半导体学报;1992年08期
5 成奇明;张树京;;非线性方程组的一种神经元网络解法[J];北方交通大学学报;1992年01期
6 刘淑东;管群;;基于遗传算法的炮兵火力分配策略[J];兵工自动化;2005年05期
7 王新军;卿华;姚娇艳;;流水线加工调度问题的神经网络算法[J];兵工自动化;2011年10期
8 赵勇;刘凯;;数字挖掘方法在遥感分类中的应用研究[J];北京测绘;2009年03期
9 冯建峰,钱敏平;神经网络中的退火——非时齐情形[J];北京大学学报(自然科学版);1993年03期
10 冯建峰,钱敏平;神经网络中的退火:Ⅰ.时齐情况[J];北京大学学报(自然科学版);1993年05期
中国重要会议论文全文数据库 前10条
1 严传魁;王如彬;;基于汉密尔顿原理的神经元模型[A];第十三届全国非线性振动暨第十届全国非线性动力学和运动稳定性学术会议摘要集[C];2011年
2 ;Edge Detection of Wood Defects in X-ray Wood Image Using Neural Network and Mathematical Morphology[A];第二十九届中国控制会议论文集[C];2010年
3 ;Synthesis of Boolean Networks Via Semi-tensor Product[A];中国自动化学会控制理论专业委员会A卷[C];2011年
4 郭东辉;Gerard Parr;;ATM交换机中以神经网络实现ATM信息胞排序交换的研究(英文)[A];信息科学与微电子技术:中国科协第三届青年学术年会论文集[C];1998年
5 ;Joint inversion of seismic data for acoustic impedance[A];中国科学院地质与地球物理研究所二○○四学术论文汇编·第一卷(地球深部)[C];2004年
6 吴章华;王莹;高学东;;具有自适应功能的企业资信分析神经网络系统[A];中国运筹学会第六届学术交流会论文集(上卷)[C];2000年
7 沈世镒;罗跃虎;;关于神经网络研究的若干问题[A];1999年中国神经网络与信号处理学术会议论文集[C];1999年
8 许进;保铮;;神经网络与图论[A];1999年中国神经网络与信号处理学术会议论文集[C];1999年
9 郭东辉;李立峰;刘瑞堂;吴伯僖;Gerard Parr;;ATM交换智能控制器的VHDL兑现方案[A];1999年中国神经网络与信号处理学术会议论文集[C];1999年
10 李立峰;郭东辉;刘瑞堂;吴伯僖;Gerard Parr;;神经网络在信元交换控制中的应用[A];1999年中国神经网络与信号处理学术会议论文集[C];1999年
中国博士学位论文全文数据库 前10条
1 孙明;基于小波和迟滞的混沌神经网络及其应用[D];哈尔滨工程大学;2010年
2 李桃迎;交通领域中的聚类分析方法研究[D];大连海事大学;2010年
3 郑大腾;柔性坐标测量机空间误差模型及最佳测量区研究[D];合肥工业大学;2010年
4 朱松;随机回归神经网络的动力学行为研究[D];华中科技大学;2010年
5 柴园园;普适的模糊推理系统理论及应用[D];北京交通大学;2011年
6 杨树忠;复杂网络中的社团检测问题研究[D];北京交通大学;2009年
7 许伟;基于进化算法的复杂化工过程智能建模方法及其应用[D];华东理工大学;2011年
8 李曼荔;求解组合优化问题的神经计算方法[D];电子科技大学;2010年
9 桑永胜;空间数据分析的神经计算方法[D];电子科技大学;2010年
10 陈国庆;荧光光谱技术在食品安全监控中的应用研究[D];江南大学;2010年
中国硕士学位论文全文数据库 前10条
1 李连昌;新安煤田二_1煤层煤与瓦斯突出危险程度预测[D];河南理工大学;2010年
2 罗婷婷;飞机钣金叠板数控套裁下料软件系统的研究[D];南昌航空大学;2010年
3 徐小任;基于BP神经网络的城镇网络地价评估模型研究[D];广西师范学院;2010年
4 程慧;基于神经网络的两类问题研究[D];广西师范学院;2010年
5 吴家瑞;服装产品加工成本快速估算方法研究[D];浙江理工大学;2010年
6 王捷;数字图像边缘检测方法的若干改进与应用研究[D];浙江理工大学;2010年
7 雷明杰;神经网络和遗传算法在中厚板轧机中的应用研究[D];郑州大学;2010年
8 张华杰;模糊神经网络在肺癌诊断中的应用[D];郑州大学;2010年
9 赵振霞;基于神经网络的节水灌溉适宜技术优选模型研究及系统开发[D];山东农业大学;2010年
10 刘翠;水声图像阈值分割及智能优化算法的研究[D];哈尔滨工程大学;2010年
【同被引文献】
中国期刊全文数据库 前7条
1 廖晓昕;细胞神经网络的数学理论(Ⅰ)[J];中国科学(A辑 数学 物理学 天文学 技术科学);1994年09期
2 廖晓昕;细胞神经网络的数学理论(Ⅱ)[J];中国科学(A辑 数学 物理学 天文学 技术科学);1994年10期
3 赵静,赫荣乔,李东风;神经科学与百年诺贝尔奖[J];生物物理学报;2002年02期
4 谢勇,徐健学,康艳梅,胡三觉,段玉斌;可兴奋性细胞混沌放电区间的识别机理[J];物理学报;2003年05期
5 周小荣;罗晓曙;蒋品群;袁五届;;小世界神经网络的二次超谐波随机共振[J];物理学报;2007年10期
6 姚国正,汪云九;神经网络的集合运算[J];信息与控制;1989年02期
7 董军,胡上序;混沌神经网络研究进展与展望[J];信息与控制;1997年05期
中国博士学位论文全文数据库 前2条
1 赵明;复杂网络上动力系统同步现象的研究[D];中国科学技术大学;2007年
2 汪茂胜;耦合动力系统中若干复杂性和非线性问题的研究[D];中国科学技术大学;2007年
中国硕士学位论文全文数据库 前3条
1 黄河;突触噪声作用下神经元细胞膜离子通道的温度效应[D];华中师范大学;2005年
2 李珊珊;复杂脑功能网络研究[D];大连理工大学;2006年
3 周小荣;小世界生物神经网络的随机响应和同步性能研究[D];广西师范大学;2007年
【相似文献】
中国期刊全文数据库 前10条
1 金聪;联想记忆神经网络的学习算法设计[J];湖北大学学报(自然科学版);1995年02期
2 黄秉宪;主动联想记忆神经网络模型[J];生物物理学报;1994年03期
3 丁正生;MP 模型中谱算法容量分析[J];西安建筑科技大学学报(自然科学版);1997年02期
4 丁正生;MP模型中外积法容量分析[J];西安科技学院学报;1996年03期
5 苗振江,袁保宗;扩展双向联想记忆神经网络及其应用[J];高技术通讯;1995年07期
6 郝晶晶;;图式理论与英语词汇联想记忆[J];科技信息;2006年09期
7 洪毅;宋明;吴杰;;开关电流联想记忆[J];湖南师范大学自然科学学报;1993年04期
8 常晋霞;;曲径通幽 词义可寻[J];科技信息;2010年23期
9 田建兵;郑晟;;基于神经网络的字母识别方法研究[J];科技情报开发与经济;2007年31期
10 汪涛,俞瑞钊;联想记忆网络的学习:基本思路和实现[J];高技术通讯;1995年04期
中国重要会议论文全文数据库 前10条
1 孟凡华;吴学礼;杜太行;;一种新型联想记忆神经网络在非线性系统辨识中的研究[A];'2003系统仿真技术及其应用学术交流会论文集[C];2003年
2 高隽;王一先;梁栋;;关于AM记忆样本选择的实验研究[A];全国第十四届计算机科学及其在仪器仪表中的应用学术交流会论文集[C];2001年
3 韩平;禹建丽;李保安;;实现联想记忆的一种神经网络模型[A];2001中国控制与决策学术年会论文集[C];2001年
4 何振亚;张毅锋;杨绿溪;;参数控制的联想记忆混沌神经元网络[A];第九届全国信号处理学术年会(CCSP-99)论文集[C];1999年
5 王建;郭炳庆;陈宏志;;协同神经网络SNN的实现[A];1995年中国智能自动化学术会议暨智能自动化专业委员会成立大会论文集(上册)[C];1995年
6 秦恒玉;王考杰;宛西原;;神经网络在模糊控制器中的应用[A];1999年中国智能自动化学术会议论文集(上册)[C];1999年
7 段书凯;刘光远;;网络参数对混沌联想记忆特性的影响[A];第十一届全国信号处理学术年会(CCSP-2003)论文集[C];2003年
8 宫向阳;涂奉生;;联想记忆神经网络的两种设计方法[A];1996中国控制与决策学术年会论文集[C];1996年
9 西广成;;评价联想记忆能力的随机方法[A];1998中国控制与决策学术年会论文集[C];1998年
10 刘晓玉;方康玲;刘斌;;吸引域给定的复值Hopfield联想记忆器的设计[A];2009年中国智能自动化会议论文集(第七分册)[南京理工大学学报(增刊)][C];2009年
中国重要报纸全文数据库 前10条
1 大任;英语“联想记忆”词条引发版权诉讼[N];中国新闻出版报;2008年
2 晓夫;CI 的结构[N];中国工商报;2000年
3 王立武;学电脑玩珠算并不矛盾,或许更能开发智力[N];新华每日电讯;2006年
4 宏洁;联通打造“世界风”高端品牌[N];国际商报;2006年
5 苑希民(中国水利水电科学研究院决策支持技术研究室 主任) 李彦彬 徐建新(华北水利水电学院) 李鸿雁(北京理工大学管理与经济学院) 苑韶峰 吕军(浙江大学环境与资源学院);人工神经网络 灵感源于大脑[N];中国水利报;2005年
6 李文;强化老人记忆八法[N];医药养生保健报;2007年
7 颐绮;林林总总单词记忆法[N];光明日报;2003年
8 王卓;体验营销:品牌传播新动力[N];中国石化报;2006年
9 本报记者 马文方;Yebol搜索:一个知识型杀手的告白[N];中国计算机报;2009年
10 弋洋;江博:为英语插上激情的翅膀 [N];光明日报;2002年
中国博士学位论文全文数据库 前10条
1 韩琦;神经网络的稳定性及其在联想记忆中的应用研究[D];重庆大学;2012年
2 王剑;一类新型联想记忆神经网络研究[D];华南理工大学;2003年
3 吴桂坤;延迟反馈神经网络和两层反馈神经网络的研究[D];厦门大学;2008年
4 张军;基于视频的运动人体异常行为分析识别研究[D];西安电子科技大学;2009年
5 鲍刚;基于忆阻递归神经网络的联想记忆分析与设计[D];华中科技大学;2012年
6 刘晓玉;复杂环境下基于神经网络的工件识别与机器人智能抓取[D];武汉科技大学;2009年
7 吴锡生;基于模糊形态双向联想记忆网络的研究[D];南京理工大学;2005年
8 朱大铭;人工神经网络的结构学习算法及问题求解研究[D];中国科学院研究生院(计算技术研究所);1999年
9 唐墨;新型模糊混沌神经网络模型及特性研究[D];哈尔滨工程大学;2008年
10 陈薇娜;一类离散神经网络系统的分支研究[D];复旦大学;2009年
中国硕士学位论文全文数据库 前10条
1 赵旺兄;基于类Hopfield网络的海马CA3区联想记忆功能障碍的建模与仿真[D];天津医科大学;2010年
2 段书凯;混沌神经网络的联想记忆特性研究[D];西南师范大学;2003年
3 曹勇;动态优化问题的进化求解策略[D];中国科学技术大学;2010年
4 李严;基于联想记忆神经网络的故障识别[D];燕山大学;2012年
5 王一先;基于联想记忆神经网络的形状识别系统应用研究[D];合肥工业大学;2002年
6 孟凡华;模糊神经网络在大滞后非线性系统中的应用[D];河北工业大学;2004年
7 黄兴;基于神经网络的数字图像水印算法研究[D];西安科技大学;2005年
8 夏松;Hopfield神经网络构造的联想记忆存储器实现与研究[D];安徽大学;2010年
9 向利华;混沌神经网络及其联想记忆功能的研究[D];东北师范大学;2012年
10 李红;自适应数字图像水印技术研究[D];山东大学;2008年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026