svm——合页损失svm——合页损失svm——合页损失
横轴表示函数间隔,我们从两个方面来理解函数间隔:

1)正负

当样本被正确分类时,y(wx+b)>0;当样本被错误分类时,y(wx+b)<0。

2)大小

y(wx+b)的绝对值代表样本距离决策边界的远近程度。y(wx+b)的绝对值越大,表示样本距离决策边界越远。

因此,我们可以知道:

当y(wx+b)>0时,y(wx+b)的绝对值越大表示决策边界对样本的区分度越好

当y(wx+b)<0时,y(wx+b)的绝对值越大表示决策边界对样本的区分度越差

从图中我们可以看到,

1)0-1损失

当样本被正确分类时,损失为0;当样本被错误分类时,损失为1。

2)感知机损失函数

当样本被正确分类时,损失为0;当样本被错误分类时,损失为-y(wx+b)。

3)合页损失函数

当样本被正确分类且函数间隔大于1时,合页损失才是0,否则损失是1-y(wx+b)。

相比之下,合页损失函数不仅要正确分类,而且确信度足够高时损失才是0。也就是说,合页损失函数对学习有更高的要求。

看来是时候买本“统计学习方法”了
参考:
https://blog.csdn.net/lz_peter/article/details/79614556
https://blog.csdn.net/qq_26598445/article/details/80901249

相关文章:

  • 2021-08-16
  • 2022-12-23
  • 2021-06-01
  • 2021-10-28
  • 2021-11-05
  • 2021-07-25
  • 2021-04-07
  • 2021-06-24
猜你喜欢
  • 2021-11-28
  • 2021-04-15
  • 2021-06-17
  • 2021-04-30
  • 2021-08-18
  • 2021-09-02
  • 2021-06-18
相关资源
相似解决方案