BP神经网络如何根据误差表现来修改学习速率

lining227 2018-01-21 11:37:33
在BP神经网络中,一般情况下学习速率net.lr是一个常数。我想让学习速率根据前后两次误差的表现来增加学习速率或者减小学习速率。
例如这样:
e^α*μ(n-1) E(n)<0.9E(n-1)
μ(n)= e^(-α)*μ(n-1) E(n)>1.04E(n-1)
μ(n-1) 其他
a=E(n)/E(n-1), 代表当前误差与上一次的误差比。如果误差增加,则乘以e(-a)系数,用来降低学习速率。如果误差减小,则乘以e(a)用来加快学习速率。
...全文
429 回复 打赏 收藏 转发到动态 举报
写回复
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复

33,009

社区成员

发帖
与我相关
我的任务
社区描述
数据结构与算法相关内容讨论专区
社区管理员
  • 数据结构与算法社区
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧