
反馈型神经网络是一种反馈动力学系统,它需要工作一段时间才能到达稳定。Hopfield神经网络是反馈网络中最简单且应用广泛的模型,它具有联想记忆(Content –Addressible Memory,CAM)的功能,如果讲Lyapunov函数定义为寻优函数,Hopfield神经网络还可以用来解决快速寻优问题。
6.2.4神经网络的学习方法
神经网络的学习:从环境中获取知识并改进自身性能,主要指调节网络参数使网络达到某种度量,又称为网络的训练。
学习方式:监督学习;非监督学习;再励学习。
学习规则(learning rule):
Hebb学习规则:
两个神经元同时处于激发状态时:它们之间的连接强度将得到加强,这一论述的数学描述被称为Hebb学习规则;
Hebb学习规则是一种无教师的学习方法,它只根据神经元连接间的激活水平改变权值,因此这种方法又称为相关学习或并联学习。
Delta()学习规则
规则实现了E中的梯度下降,因此使误差函数达到最小值。但学习规则只使用于线性可分函数,无法用于多层网络。BP网络的学习算法称为BP算法,是在规则基础上发展起来的,可在多网络上有效的学习。
概率式学习:
从统计力学、分子热力学和概率论中关于系统稳态能量的标准出发,进行神经网络学习的方式称概率式学习。神经网络处于某一状态的概率主要取决于在此状态下的能量,能量越低,概率越大。同时,此概率还取决于温度参数T。T越大,不同状态出现概率的差异便越小,较容易跳出能量的局部极小点而得到全局的极小点;T越小时,情形正相反。概率式学习的典型代表是Boltzmann机学习规则。它是基于模拟退火的统计优化方法,因此又称模拟退火算法。
竞争式学习:
竞争式学习属于无教室学习方式。此种学习方式利用不用层间的神经元发生兴奋性联接,以及同一层内距离很近的神经元间发生同样的兴奋性联接,而距离较远的神经元产生抑制性联接。在这种联接机制中引入竞争机制的学习方式称为竞争式学习。本质在于神经网络中高层次神经元对低层次神经元的输入模式进行竞争识别。
神经网络简介与举例_计算机软件及应用_IT/计算机_专业资料。神经网络基本原理,分类,一个MATLAB例子神经网络 背景 ? 神经网络的发展历史:“人工神经网络”(ARTIFICIAL ...
用平常语言介绍神经网络 (Neural Networks in Plain English) 因为我们没有很好了解大脑,我们经常试图用最新的技术作为一种模型来解释它。 在我童年的时候,我们都...
人工神经网络简介张 人工 神经 网络是 一 门多学 科 综合性 的研究 领域 该研究 虽已有 年代 年历史但发展很不 平衡 , , 、 承 福北京 北京 大 学物 理...
神经网络方法简介 两类问题 识别问题(分类问题) 模式识别是指根据研究对象的特征或属性,利用以计算机 为中心的机器系统,运用一定的分析算法认定它的类别。 两类问题...
神经网络简介人工神经网络(Artificial Neural Networks,简写为 ANNs)也简称为神经网络(NNs)或 称作连接模型(Connection Model) ,它是一种模仿动物神经网络行为特征,...
2 BP 神经网络简介 x z 图 1 BP 神经网络结构图 BP(Back Propagation)神经网络是目前人工神经网络中研究最深入、应用最 为广泛的一种模型,其结构如图 l 所...
第1章 1.1 引言 人工神经网络简介 现代计算机有很强的计算和信息处理能力,但是它对于模式识别,感知和在 复杂环境中作决策等问题的处理能力却远远不如人, 特别是...
人工神经网络简介人工神经网络简介人工神经网络简介人工神经网络简介隐藏>> 人工神经网络简介华 中理 工大学 摘要学 习 算法 , 朱心越、 丁洪、 杨叔子 本文 简...
中国神经网络委员会( 中国神经网络委员会(CNNC)简介 ) ? 同年(1990年)在北京召开召开了第一届 全国神经网络学术会议,罗沛霖担任大会 主席。这次会议虽是第一届,...
人工神经网络 人工神经网络简介主讲教师: 唐玉超 人工神经网络 人工神经网络是集脑科学、神经心理学和信息科学 等多学科的交叉研究领域,是近年来高科技领域的一个 ...
热门文档