Delta学习规则

代价函数(Cost Function, Lost Function)

delta学习规则及梯度下降法

其中,误差E是权向量Wj的函数。欲使误差E最小,Wj与误差的负梯度成正比,即:

delta学习规则及梯度下降法

梯度下降法的问题

1. 学习率难以选取,太大会产生震荡,太小会收敛缓慢

2. 容易陷入局部最优解

delta学习规则及梯度下降法

delta学习规则及梯度下降法


相关文章:

  • 2021-11-27
  • 2021-09-10
  • 2022-01-01
  • 2021-10-30
  • 2021-07-17
  • 2021-11-27
  • 2021-10-14
  • 2021-04-07
猜你喜欢
  • 2021-11-27
  • 2021-05-02
  • 2022-12-23
  • 2021-07-05
  • 2021-04-05
  • 2021-08-06
  • 2021-11-07
相关资源
相似解决方案