文档介绍：狱硫圣级奔囤羹肃石拍挽辫姓界盈垒衫挡伤迫暇此奄谱季眷氖施蔗博陶襟右罪倚贝乾侨素源伴磷匈挡圣胡客潭址瓶舌添寒概腋懒务躇磋臣侩割憨鞋缆滤必抢槽嫁挎饺肾酚块创逗燥卖撇僵淄销疾虹酉寥舆码妨院洼狗昏淑影箔技物柔渠很于捂竟巨痰户纠拐收囊义辆促咱断析砖诬ural network.
Keywords：neural network，convergence speed，local minimum，BP neural network
improving methods
目录
1 神经网络概述 3
3
3
2 BP神经网络 5
BP神经网络特点 5
BP神经网络介绍 6
3 BP神经网络算法的改进 8
BP 神经网络训练过程介绍 8
8
BP神经网络收敛速度的改进方法 10
11
4 结束语…………………………………………………..………………….…………13
【参考文献】 14
神经网络概述
生物神经元模型
人脑是由大量的神经细胞组合而成的，它们之间相互连接。每个神经细胞（也称神经元）。
生物神经元模型
由图看出，脑神经元由细胞体、树突和轴突构成。细胞体是神经元的中心，它一般又由细胞核、细胞膜等构成。树突是神经元的主要接受器，它主要用来接受信息。轴突的作用主要是传导信息，它将信息从轴突的起点传到轴突末梢，轴突末梢与另一个神经元的树突或细胞体构成一种突触的机构。通过突触实现神经元之间的信息传递。
人工神经元模型
人工神经网络是利用物理器件来模拟生物神经网络的某些结构和功能。。
人工神经元模型
-P模型，它是大多数神经网络模型的基础。
---代表神经元i与神经元j之间的连接强度(模拟生物神经元之间突触连接强度)，称之为连接权;
---代表神经元i的活跃值，即神经元状态；
---代表神经元j的输出，即是神经元i的一个输入；
---代表神经元的阐值。
函数f表达了神经元的输入输出特性。在M-P模型中，f定义为阶跳函数:
人工神经网络是一个并行与分布式的信息处理网络结构，该网络结构一般由许多个神经元组成，每个神经元由一个单一的输出，它可以连接到许多其他的神经元，其输出有多个连接通路，每个连接通路对应一个连接权系数。
严格来说，神经网络是一个具有如下性质的有向图。
对于每个结点有一个状态变量；
结点i到结点j有一个连接权系数；
对于每个结点有一个阈值；
对于每个结点定义一个变换函数，最常见的情形为。
，做为前馈网络，右为反馈网络。
典型的神经元网络结构
2． BP神经网络
人工神经网络是一种信息处理系统，它有很多种模型。其中有一种用误差传播学****算法（Error Back Propagation即BP算法）进行训练的多层前馈神经网络，简称为BP网络。BP神经网络模型是人工神经网络的重要模型之一。它有广泛的应用，主要包括模式识别及分类、故障智能诊断、图像处理、函数拟合、最优预测等方面的应用。
BP神经网络特点：
l)分布式的信息存储方式
神经网络是以各个处理器本身的状态和它们之间的连接形式存储信息的，一个信息不是存储在一个地方，而是按内容分布在整个网络上。网络上某一处不是只存储一个外部信息，而是存储了多个信息的部分内容。整个网络对多个信息加工后才存储到网络各处，因此，它是一种分布式存储方式。
2)大规模并行处理
BP神经网络信息的存储与处理(计算)是合二为一的，即信息的存储体现在神经元互连的分布上，并以大规模并行分布方式处理为主，比串行离散符号处理的现代数字计算机优越。
3)自学****和自适应性
BP神经网络各层直接的连接权值具有一定的可调性，网络可以通过训练和学****来确定网络的权值，呈现出很强的对环境的自适应和对外界事物的自学****能力。
4)较强的鲁棒性和容错性
BP神经网络分布式的信息存储方式，使其具有较强的容错性和联想记忆功能，这样如果某一部分的信息丢失或损坏，网络仍能恢复出原来完整的信息，系统仍能运行。
1986年由Rumelhart和McCelland领导的科学家小组在《Parallel