正则化

Post by Joey Huang under ml on 2015-11-20(Friday) 22:52. Tags: machine-learning,

线性回归算法和逻辑回归算法都可能出现过拟合,即模型很好地拟合了训练数据,但对新数据的预测效果很差。当训练样例较少时,这种情况发生的概率就更大。正则化就是为了解决这个问题的。

阅读全文 »








标准方程 Normal Equations

Post by Joey Huang under ml on 2015-09-29(Tuesday) 23:20. Tags: machine-learning,

线性回归里的梯度下降算法,通过不停地迭代求参数,从而不停地逼近成本函数的最小值来求解。另外一个方法是直接计算成本函数的微分,令微分算子为零,求解这个方程,即可得到线性回归的解。

阅读全文 »




Powered by Pelican and Zurb Foundation. Theme by Kenton Hamaluik.