线性模型
分类示例
图像分类
垃圾邮件过滤
文档归类
情感分类
举例：文本分类 词袋模型
线性分类模型
线性模型 决策边界都是线性
logistic 回归
将分类问题看作条件概率估计问题
logistic函数 sigmoid函数
学习准则
提前知识：熵 Entropy 交叉熵 Cross Entropy
交叉熵 Cross Entropy
KL散度 Kullback-Leibler Divergence
交叉熵损失 P_r(y|x)为确定 可以消掉
优化
多分类问题 argmax
softmax回归
多分类问题
交叉熵损失：KL散度
参数学习