转 BP神经网络优缺点 人工神经网络的优缺点

原文见:

http://blog.donews.com/elite/archive/2007/11/23/1230721.aspx

多层前向BP网络是目前应用最多的一种神经网络形式, 但它也不是非常完美的, 为了更好的理解应用神经网络进行问题求解,这里对它的优缺点展开讨论:

多层前向BP网络的优点:
①网络实质上实现了一个从输入到输出的映射功能,而数学理论已证明它具有实现任 何复杂非线性映射的功能。这使得它特别适合于求解内部机制复杂的问题;
[转]BP神经网络优缺点 人工神经网络的优缺点
②网络能通过学习带正确答案的实例集自动提取“合理的”求解规则,即具有自学习能力;
③网络具有一定的推广、概括能力。

多层前向BP网络的缺点:
①BP算法的学习速度很慢,其原因主要有:
a 由于BP算法本质上为梯度下降法,而它所要优化的目标函数又非常复杂,因此,必然会出现“锯齿形现象”,这使得BP算法低效;
b存在麻痹现象,由于优化的目标函数很复杂,它必然会在神经元输出接近0或1的情况下,出现一些平坦区,在这些区域内,权值误差改变很小,使训练过程几乎停顿;
c为了使网络执行BP算法,不能用传统的一维搜索法求每次迭代的步长,而必须把步长的更新规则预先赋予网络,这种方法将引起算法低效。
②网络训练失败的可能性较大,其原因有:
a从数学角度看,BP算法为一种局部搜索的优化方法,但它要解决的问题为求解复杂非线性函数的全局极值,因此,算法很有可能陷入局部极值,使训练失败;
b 网络的逼近、推广能力同学习样本的典型性密切相关,而从问题中选取典型样本实例组成训练集是一个很困难的问题。
③难以解决应用问题的实例规模和网络规模间的矛盾。这涉及到网络容量的可能性与可行性的关系问题,即学习复杂性问题;
④网络结构的选择尚无一种统一而完整的理论指导,一般只能由经验选定。为此,有人称神经网络的结构选择为一种艺术。而网络的结构直接影响网络的逼近能力及推广性质。因此,应用中如何选择合适的网络结构是一个重要的问题;
⑤新加入的样本影响已学习成功的网络,而且刻画每个输入样本的特征的数目也必须相同;
⑥网络的预测能力(也称泛化能力、推广能力)与训练能力(也称逼近能力、学习能力)的矛盾。一般情况下,训练能力差时,预测能力也差,并且一定程度上,随训练能力地提高,预测能力也提高。但这种趋势有一个极限,当达到此极限时,随训练能力的提高,预测能力反而下降,即出现所谓“过拟合”现象。此时,网络学习了过多的样本细节,而不能反映样本内含的规律。

  

爱华网本文地址 » http://www.413yy.cn/a/25101016/305443.html

更多阅读

神经网络的特点与功能 卷积神经网络 特点

一、神经网络的特点1.信息处理的并行性、信息存储的分布性、信息处理单元的互联性、结构的可塑性人工神经网络是由大量简单处理元件相互连接构成的高度并行的非线性系统,具有大规模并行性处理特性。虽然每个处理但与的功能十分简单

杂谈 网络的利弊 网络游戏的利弊

网络的利弊在现实生活里,网络看起来确实是个好的,沟通渠道和实用性较强的交流、交际平台。人们借助它的沟架,完成了好多原来想都不敢想的事情。因为有了网络的出现,使生活中的许多问题和心里一直放不下的事情;得以迎刃而解。有了网络的连

你是我网络的知己 美文 你是我的红颜知己

你是我网络的知己素材:网络 编辑:天使当纯情的玫瑰争先灿然地绽放,当空气中溢满了醉人的芬芳,我用殷切的思念,醮着最浓重的情感,迤俪出馥的诗行,送给你,我远方的最真挚的朋友。感谢网络,在这个虚拟的世界,让我们相识,相知。 一定有些什么,是我们

广场恐怖症—闭居者神经症的病因理论 神经症病因

SirMartinRoth引言广场恐怖症或闭居者综合征是一种神经症。神经症这一术语指的是不由躯体疾病或脑损害所引起,不伴有幻觉、妄想或其它脱离现实的精神病性特征性症状的疾病。患有神经症障碍的患者意识到他们有病,并能够主动求医。神经

声明:《转 BP神经网络优缺点 人工神经网络的优缺点》为网友蓝天依旧芬香分享!如侵犯到您的合法权益请联系我们删除