摘要：知识要点： 1、通过多项式曲线拟合引出线性模型； 2、介绍多项式的阶数与模型复杂度的关系； 3、什么是过拟合、欠拟合； 4、解决过拟合、欠拟合的方法； 5、最小化误差平方和可以使用最大似然估计解释，并且过拟合问题是最大似然估计的一个必然结果。 读书笔记： 上图中N=10个蓝色样本点是函数sin(2* 阅读全文

摘要：声明：出处http://blog.csdn.net/zhongkejingwang/article/details/42264479 什么是PCA？ 在数据挖掘或者图像处理等领域经常会用到主成分分析，这样做的好处是使要分析的数据的维度降低了，但是数据的主要信息还能保留下来，并且，这些变换后的维两两不 阅读全文

摘要：声明：转自http://blog.csdn.net/zhongkejingwang/article/details/43053513 在网上看到有很多文章介绍SVD的，讲的也都不错，但是感觉还是有需要补充的，特别是关于矩阵和映射之间的对应关系。前段时间看了国外的一篇文章，叫A Singularly 阅读全文

摘要：一、引言 本文是总结斯坦福大学机器学习课程的第五次作业。作业分为两个部分，第一部分：根据水库的水位变化情况，要求使用正则化的线性回归预测大坝的出水量。第二部分：诊断调试机器学习算法和检查偏差和方差的影响。 作业，给出12个测试集数据，特征量只有一个x1反应的水库的水位情况，y是对应的大坝出水量。首先 阅读全文