文档介绍：BP 神经网络算法 1 、神经网络历史与运用领域神经网络最早的研究是 40 年代心理学家 Mcculloch 和数学家 Pitts 合作提出的,他们提出的 MP 模型拉开了神经网络研究的序幕。神经网络的发展大致经过 3个阶段: 1947 ~ 1969 年为初期,在这期间科学家们提出了许多神经元模型和学****规则,如 MP 模型、 HEBB 学****规则和感知器等; 60 年代末期至 80 年代中期,神经网络控制与整个神经网络研究一样,处于低潮。在此期间,科学家们做了大量的工作,如 Hopfield 教授对网络引入能量函数的概念,给出了网络的稳定性判据,提出了用于联想记忆和优化计算的途径。 1984 年, Hiton 教授提出 Bol tzman 机模型; 1986 年 Kumelhart 等人提出误差反向传播神经网络,简称 BP网络。目前, BP 网络已成为广泛使用的网络。 1987 年至今为发展期,在此期间,神经网络受到国际重视,各个国家都展开研究,形成神经网络发展的另一个高潮。人工神经网络( ANN ) 受到生物学的启发是生物神经网络的一种模拟和近似, 它从结构、实现机理和功能上模拟生物神经网络。从系统观点看,人工神经元网络是由大量神经元通过极其丰富和完善的连接而构成的自适应非线性动态系统。人工神经网络,因为生物的学****系统是由相互连接的神经元组成的异常复杂的网络,其中每一个神经元单元有一定数量的实值输入,并产生单一的实数值输出。 1960 年威德罗和霍夫率先把神经网络用于自动控制研究。神经网络以其独特的结构和处理信息的方法,在许多实际应用领域中取得了显著的成效,主要应用如下:自动控制领域、处理组合优化问题、模式识别、图像处理、传感器信号处理、机器人控制、信号处理、卫生保健、医疗、经济、化工领域、焊接领域、地理领域、数据挖掘、电力系统、交通、军事、矿业、农业和气象等领域。 2、 BP 神经网络据统计[1], 在所有的神经网络应用中,BP 神经网络所占比例在 80% 以上。 BP 神经网络因其良好的非线性逼近能力和泛化能力以及使用的易适性而更是受到众多行业的青睐。 BP 神经网络采用的反向传播算法(BP 算法) 是目前在前馈神经网络中研究得最为成熟且应用最广的一种有导师学****算法。 BP 神经网络在模式识别、图像处理、信息处理、智能控制、故障检测、企业管理、市场分析等方面的应用已取得了显著成效。可以说,BP 神经网络的应用已深入到经济、化工、工控、军事等众多领域, 并且从其应用的优势及趋势可以预言其应用前景将更加光明。在这样一个信息及经济高度发达的时期,研究 BP神经网络,为其进一步的发展及应用做出一定的贡献是极具理论价值和实用价值的。、 BP 神经网络的定义 BP(Back Propagation) 神经网络,即误差反传误差反向传播算法的学****过程,由信息的正向传播和误差的反向传播两个过程组成。输入层各神经元负责接收来自外界的输入信息,并传递给中间层各神经元;中间层是内部信息处理层, 负责信息变换,根据信息变化能力的需求,中间层可以设计为单隐层或者多隐层结构;最后一个隐层传递到输出层各神经元的信息,经进一步处理后,完成一次学****的正向传播处理过程,由输出层向外界输出信息处理结果。当实际输出与期望输出不符时,进入误差的反向传播阶段。误差通过输出层,按误差