最近审论文和看报告中遇到LM优化和齐普夫分布,于是查了一下。

LM方法是高斯牛顿迭代方法的改进,下面分别是高斯牛顿、齐普夫方法的公式:

Δ=(JfTJf)1Jf

即下降太快,使用较小的λ,更接近高斯牛顿

即下降太慢,使用较大的λ,更接近梯度下降

而且齐普夫方法适用于词频分布或长尾分布

相关文章:

  • 2022-12-23
  • 2021-11-11
  • 2021-08-08
  • 2022-01-16
  • 2021-05-17
  • 2021-08-25
  • 2021-09-08
猜你喜欢
  • 2021-12-08
  • 2021-04-02
  • 2022-12-23
  • 2021-09-18
  • 2022-02-16
  • 2021-12-30
相关资源
相似解决方案