1. 损失函数/代价函数

定义损失函数J(a, b)

机器学习 -- 线性回归(Ⅱ 最小二乘法)

在上述的函数中,a和b是未知数,而不是x和y。

 

机器学习 -- 线性回归(Ⅱ 最小二乘法)

(1)对b求偏导:

机器学习 -- 线性回归(Ⅱ 最小二乘法)

机器学习 -- 线性回归(Ⅱ 最小二乘法)

(2)对a求偏导:

机器学习 -- 线性回归(Ⅱ 最小二乘法)

将(1)求得的b代入得:

机器学习 -- 线性回归(Ⅱ 最小二乘法)

机器学习 -- 线性回归(Ⅱ 最小二乘法)

移动可得a:

机器学习 -- 线性回归(Ⅱ 最小二乘法)

对a进行整理:

机器学习 -- 线性回归(Ⅱ 最小二乘法)

故最后整理得:

机器学习 -- 线性回归(Ⅱ 最小二乘法)

 

相关文章: