逻辑回归（二元+多元分类原理）

二元分类

 

Sigmod函数

 

 

 

 

 

 逻辑回归中的损失函数

 

 

 

 

 

 

 

 

 

多元分类

当我们处理多分类任务时，通常需要使用Softmax Regression模型。
Softmax Regression会对每一类别估算出一个概率。
工作原理：将判定为某一类的特征相加，然后将这些特征转化为判定是这一类的概率。

 Softmax思想

 

 

 

 

 

 

 

 

 Softmax举例

 

 

 

 

 

 

 

 

 多元分类采取的损失函数

 

 

 交叉熵损失函数计算实例

 

 定义交叉熵损失函数