8.人工智能数学基础--《微积分与概率论》--导数在梯度下降中的应用

1. 方向导数：
   主要是求在某个方向上导数最大，然后此时梯度下降最快，可以以最快的速度达到最优解。但有可能计算360度方向上进行导数计算，其导数可能只是局部最优值，因为可能按照当前方向进行计算，到了一半进度的时候，又遇到了比他高的陡坡，而没有按此方向计算一直到底部，这就称之为局部最优解。