深度学习：反向传播与基本原理

我们要证明得是这四个公式

有了这个四个公式，我们得反响传播就可以递推得到。
BP1公式：
这个是输出层误差方程，这个方程好像没啥好说的

BP2公式

从这个公式我们可以通过高阶层的误差，通过的递推的方式求出每一层的误差

BP3公式

BP4公式

从BP4公式我们可以看到，如果前一层的输出函数过于小的话 w参数学习就会变慢。