随笔分类 -  机器学习

摘要：支持向量机（Support Vector Machine, SVM） 基本思想就是找两类数据的最大间隔。 一、目标函数 令数据集为 D，标签 y 为 +1、-1。 正确的分类可以用这个不等式描述： 当我们不希望有点落在边界时，公式改写为： 即将支持向量的函数间隔为 1，相当于对wT 、b 进行了缩放 阅读全文

摘要：线性回归 （1）目标 预测函数： 即 学得w和b后，模型就可以确定。 （2）一维情形 先假设输入特征只有一维。 ， 使用均方差当做损失函数，最小化均方差，也就是最小二乘法。 求最小化均方差时的w和b，分别对上式w和b求导，使导数为0，即得到所求w*和b*。 （3）推广到多维 现在考虑多维特征。 把数 阅读全文