随笔分类 -  Machine Learning

机器学习:梯度下降和delta法则
摘要:梯度下降   利用感知器法则的要求是必须训练样本是线性可分的,当样例不满足这条件时,就不能再收敛,为了克服这个要求,引出了delta法则,它会收敛到目标概念的最佳近似! delta法则的关键思想是利用梯度下降(gradient descent)来搜索可能的权向量的假设空间,以找到最佳拟合训练样例的权向量。 阅读全文

posted @ 2013-05-02 20:18 dztgc 阅读(3912) 评论(0) 推荐(2)

机器学习:感知器(perceptron)
摘要:感知器以一个实数值向量作为输入,计算这些输入的线性组合,然后如果结果大于某个阈值就输出1 ,否则输出-1 。 更精确地,如果输入为x,那么感知器计算的输出为: 阅读全文

posted @ 2013-04-22 22:16 dztgc 阅读(6899) 评论(1) 推荐(0)

机器学习:ID3算法
摘要:决策树通过把实例从根节点排列到某个叶子结点来分类实例,叶子结点即为实例所属的分类。树上的每一个结点指定了对实例的某个属性的测试,并且该结点的每一个后续分支对应于该属性的一个可能值。 分类实例的方法是从这棵树的根节点开始,测试这个结点指定的属性,然后按照给定实例的该属性值对应的树枝向下移动。然后这个过程在以新结点为根的子树上重复。 画出了一棵典型的学习到的决策树。 阅读全文

posted @ 2013-04-22 20:37 dztgc 阅读(6857) 评论(0) 推荐(3)