一种基于误差变化率的自适应反向传播算法
谢克明; 张建伟
太原理工大学自动化系 太原 030024
AN ADAPTIVE BACKPROPAGATION ALGORITHM BASED ON ERROR RATE OF CHANGE
Xie Keming; Zhang Jianwei
Department of Automation Taiyuan University of Technology Taiyuan 030024
摘要 本文针对BP算法存在收敛速度慢的缺点,提出一种基于网络动态训练误差变化率自动校正学习步长和冲量因子的自适应反向传播算法。异或问题的仿真结果表明,该方法具有较快的收敛速度。
关键词 :
神经网络 ,
自适应反向传播算法 ,
XOR问题
Abstract :In order to overcome slow convergence rate of the standard BP algorithm, this paper presents an adaptive backpropagation algorithm which can update learning rate and birr factor automatically based on dynamic training error rate of change. Simulation result of the XOR problem shows much faster convergence rate can be obtained by this algorithm.
Key words :
Neural networks
Adaptive backpropagation algorithm
XOR problem
收稿日期: 1997-01-30
[1]
喻昕,许治健,陈昭蓉,徐辰华. 拉格朗日神经网络解决带等式和不等式约束的非光滑非凸优化问题 [J]. 电子与信息学报, 2017, 39(8): 1950-1955.
[2]
吴震东,王雅妮, 章坚武. 基于深度学习的污损指纹识别研究 [J]. 电子与信息学报, 2017, 39(7): 1585-1591.
[3]
张舸,张鹏远,潘接林,颜永红. 基于递归神经网络的语音识别快速解码算法 [J]. 电子与信息学报, 2017, 39(4): 930-937.
[4]
伍家松, 达臻,魏黎明,SENHADJI Lotfi,舒华忠. 基于分裂基-2/(2a )FFT算法的卷积神经网络加速性能的研究 [J]. 电子与信息学报, 2017, 39(2): 285-292.
[5]
王海,蔡英凤,贾允毅,陈龙, 江浩斌. 基于深度卷积神经网络的场景自适应道路分割算法 [J]. 电子与信息学报, 2017, 39(2): 263-269.
[6]
章雒霏,张铭,李晨. 一种新的语音和噪声活动检测算法及其在手机双麦克风消噪系统中的应用 [J]. 电子与信息学报, 2016, 38(8): 2020-2026.
[7]
季渊,陈文栋,冉峰,张金艺,David LILJA. 具有二维状态转移结构的随机逻辑及其在神经网络中的应用 [J]. 电子与信息学报, 2016, 38(8): 2099-2106.
[8]
侯志强,戴铂,胡丹,余旺盛,陈晨,范舜奕. 基于感知深度神经网络的视觉跟踪 [J]. 电子与信息学报, 2016, 38(7): 1616-1623.
[9]
王迎雪,赵胜辉,于莹莹,匡镜明. 基于受限玻尔兹曼机的语音带宽扩展 [J]. 电子与信息学报, 2016, 38(7): 1717-1723.
[10]
邬战军,牛敏,许冰,牛燕雄,耿天琪,张帆,满达. 基于谱回归特征降维与后向传播神经网络的识别方法研究 [J]. 电子与信息学报, 2016, 38(4): 978-984.
[11]
赵雄文,郭春霞,李景春. 基于高阶累积量和循环谱的信号调制方式混合识别算法 [J]. 电子与信息学报, 2016, 38(3): 674-680.
[12]
徐彬,陈渤,刘宏伟,金林. 基于注意循环神经网络模型的雷达高分辨率距离像目标识别 [J]. 电子与信息学报, 2016, 38(12): 2988-2995.
[13]
杜兰,刘彬,王燕,刘宏伟,代慧. 基于卷积神经网络的SAR图像目标检测算法 [J]. 电子与信息学报, 2016, 38(12): 3018-3025.
[14]
肖志涛,崔宁,吴骏,耿磊,张芳,温佳,童军,刘晓婷,杨嵩. 基于Hesse矩阵和多尺度分析的视网膜动静脉血管管径测量方法 [J]. 电子与信息学报, 2016, 38(11): 2871-2878.
[15]
邓赵红,陈俊勇,刘解放,王士同. 面向癫痫脑电图信号识别的径向基最小最大概率分类树 [J]. 电子与信息学报, 2016, 38(11): 2848-2855.