BP 神经网络的信息处理方式具有如下特点:
1)信息分布存储。人脑存储信息的特点是利用突触效能的变化来调整存储内容, 即信息存储在神经元之间的连接强度的分布上, BP神经网络模拟人脑的这一特点,使信息以连接权值的形式分布于整个网络。
2) 信息并行处理。人脑神经元之间传递脉冲信号的速度远低于冯·诺依曼计算机的工作速度,但是在很多问题上却可以做出快速的判断、决策和处理,这是由于人脑是一个大规模并行与串行组合的处理系统。BP神经网络的基本结构模仿人脑,具有并行处理的特征,大大提高了网络功能。
3)具有容错性。生物神经系统部分不严重损伤并不影响整体功能,BP神经网络也具有这种特性,网络的高度连接意味着少量的误差可能不会产生严重的后果,部分神经元的损伤不破坏整体,它可以自动修正误差。这与现代计算机的脆弱性形成鲜明对比。
4)具有自学习、自组织、自适应的能力。BP神经网络具有初步的自适应与自组织能力,在学习或训练中改变突触权值以适应环境,可以在使用过程中不断学习完善自己的功能,并且同一网络因学习方式的不同可以具有不同的功能,它甚至具有创新能力,可以发展知识,以至超过设计者原有的知识水平。
由于BP网络训练中稳定性要求学习效率很小,所以梯度下降法使得训练很慢。动量法因为学习率的提高通常比单纯的梯度下降法要快一些,但在实际应用中还是速度不够,这两种方法通常只应用于递增训练。
多层神经网络可以应用于线性系统和非线性系统中,对于任意函数模拟逼近。当然,感知器和线性神经网络能够解决这类网络问题。但是,虽然理论上是可行的,但实际上BP网络并不一定总能有解。
对于非线性系统,选择合适的学习率是一个重要的问题。在线性网络中,学习率过大会导致训练过程不稳定。相反,学习率过小又会造成训练时间过长。和线性网络不同,对于非线性多层网络很难选择很好的学习率。对那些快速训练算法,缺省参数值基本上都是最有效的设置。
非线性网络的误差面比线性网络的误差面复杂得多,问题在于多层网络中非线性传递函数有多个局部最优解。寻优的过程与初始点的选择关系很大,初始点如果更靠近局部最优点,而不是全局最优点,就不会得到正确的结果,这也是多层网络无法得到最优解的一个原因。为了解决这个问题,在实际训练过程中,应重复选取多个初始点进行训练,以保证训练结果的全局最优性。
网络隐层神经元的数目也对网络有一定的影响。神经元数目太少会造成网络的不适性,而神经元数目太多又会引起网络的过适性。
BP网络优缺点_工学_高等教育_教育专区。BP网络优缺点BP网络优缺点多层前向 BP 网络的优点:wgao ①网络实质上实现了一个从输入到输出的映射功能, 而数学理论已...
多层前向 BP 网络是目前应用最多的一种神经网络形式, 它 具备神经网络的普遍优点,但它也不是非常完美的, 为了更好的理解应用神经网 络进行问题求解, 这里对它...
BP 神经网络的优缺点 BP 神经网络具有以下优点: 1) 非线性映射能力:BP 神经网络实质上实现了一个从输入到输出的映射功能, 数学理论证 明三层的神经网络就能够以...
即 BP 神经网 络具有一定的容错能力。 鉴于 BP 神经网络的这些优点,国内外不少研究学者都对其进行了研究,并运用网络解 决了不少应用问题。但是随着应用范围的...
BP神经网络优缺点的讨论_IT/计算机_专业资料。 今日推荐 88份文档 ... 基于MATLAB的BP神经网络... 28页 1下载券 人工神经网络固有的优点... 4页...
小波BP优点_数学_自然科学_专业资料。小波和 BP 的优点: 小波分析是一种新兴...建立好 的网络只有经过训练 以后才可 以用 于电力 负荷预 测 的实际应用 。...
的多层感知器的模型 BP算法的多层感知器的模型三层BP网络 三层BP网络 o1 W 1...调整权值,找到最优点 那么如何更好地调整权值?利用算法使得权值在更新的过程中,...
BP神经网络分类器BP神经网络分类器隐藏>> Matlab 的神经网络工具箱实用指南 作者:夏寒 2000/11/09 发布时间: 文章摘要: 第一章是神经网络的基本介绍, 第二章...
三、 BP 神经网络及其原理 (1)BP 神经网络定义 BP (Back Propagation)神经...(4)BP 网络的优点以及局限性 BP 神经网络最主要的优点是具有极强的非线性映射...
BP神经网络 1 引例 BP神经网络原理 2 3 BP神经网络的使用步骤 4 6 5 BP...基于BP神经网络的工程造价快速估算模型 5、BP神经网络的优缺点优点: ?非线性...
热门文档