线性回归

线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天

高斯分布

线性回归之第一天
线性回归之第一天
线性回归之第一天

线性回归之第一天
但是有些数据真的不服从高斯分布,所以这时再假设为高斯分布,即会有问题了。

最大似然估计与最小二乘法的本质

线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天

合理假设

线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天

求解目标函数

线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
所以我们希望参数不要太大,虽然最后通过加加减减得到-10到10区间的值,但实际上是不稳定的。
线性回归之第一天

加入正则惩罚项

线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
在做预测时我们希望有时希望重视稀疏解,即希望有些参数为0,即认为所对应的特征对于预测结果无效。可保证模型越简单。
线性回归之第一天
L1正则项的特征选择,希望得到稀疏解,即希望加上一个数一数参数分量中不等于0的数目,即某一个维度不等于0作为正则惩罚项。
线性回归之第一天
线性回归之第一天
箭头所指向就是在有效范围内的最小值。
线性回归之第一天
线性回归之第一天
线性回归之第一天

参数数据的使用

线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天

利用梯度下降法求解模型中的参数

线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
函数是凸函数,找到局部极小值实际上就是全局最小值。
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天

线性回归为什么可以得到高次曲线呢?

线性回归之第一天
线性回归之第一天
线性回归之第一天
线性回归之第一天

相关文章:

  • 2021-10-05
  • 2021-05-17
  • 2021-09-14
  • 2021-08-26
  • 2021-05-20
  • 2021-12-14
  • 2021-12-10
  • 2022-01-09
猜你喜欢
  • 2021-06-20
  • 2021-07-14
  • 2022-01-03
  • 2022-01-15
  • 2021-10-08
  • 2021-04-18
  • 2021-06-11
相关资源
相似解决方案