BP算法主要解决的是神经网络中的调参问题 

机器学习08 BP算法

forward pass

机器学习08 BP算法 

 

其中,从输出往前推导的计算为:

机器学习08 BP算法

 机器学习08 BP算法

机器学习08 BP算法 取决于机器学习08 BP算法的定义(类似于sigmoid function)

机器学习08 BP算法取决于loss function与目标值之间的定义

机器学习08 BP算法 

 往前的过程为:机器学习08 BP算法 和 机器学习08 BP算法 乘以一些权重再乘 机器学习08 BP算法 得到 机器学习08 BP算法 以及 机器学习08 BP算法 和 机器学习08 BP算法 乘以一些权重再乘 机器学习08 BP算法 得到 机器学习08 BP算法

相关文章: