1直在路上1

摘要： 一、目的 主要以实例讲解HMM，防止公式吓跑大家 HMM两个假设： 齐次马尔可夫性假设：当前状态只依赖上一个状态 观测独立性假设：当前观测只依赖当前状态 二、实例 假设生活中的天气只有三种状态：sun，cloud，rain，并且我们知道他们之间相互转换的概率，也就是说： 昨天是sun，今天天气转换成 阅读全文

摘要： 一、XGBoost起源 XGBoost的全称是ExtremeGradient Boosting，2014年2月诞生，作者为华盛顿大学研究机器学习的大牛——陈天奇。 他在研究中深深的体会到现有库的计算速度和精度问题，为此而着手搭建完成 xgboost 项目。 XGBoost问世后，因其优良的学习效果以 阅读全文

摘要： 一、背景介绍 奇异值分解（Singular value decomposition）简称SVD，是将矩阵分解为特征值和特征向量的另一种方法。 奇异值分解可以将一个比较复杂的矩阵用更小更简单的几个子矩阵相乘来表示，这些小矩阵描述的都是矩阵的重要的特性。 奇异值分解在图形降噪、推荐系统中都有很重要的应用 阅读全文

摘要： 一、接着上一节说正定矩阵 所谓正定，就是$x^TAx > 0$（$except \space for \space x = 0$）成立，我们通常也可以通过特征值，主元，行列式来判断 虽然我们知道了什么是正定矩阵，如何判断正定矩阵，那么正定矩阵是从何而来的呢？主要来自：最小二乘法 实际上，大量的物理问 阅读全文

摘要： 一、本讲的目标 1）怎么判断一个矩阵是否是正定矩阵 2）为什么我们对正定矩阵如此感兴趣 二、正定矩阵 我们从2*2的对称矩阵开始讲，注意：线性代数的范围内正定矩阵需要是对称矩阵 设$A = \left[\begin{array}{ll}{a} & {b} \\ {b} & {c}\end{array 阅读全文

摘要： 一、习题 本章主要复习前面讲解的内容，我们可以一一自己作答，后期把习题补上 阅读全文

摘要： 一、马尔可夫矩阵 马尔可夫矩阵例子： $A=\left[\begin{array}{ccc}{0.1} & {0.01} & {0.3} \\ {0.2} & {0.99} & {0.3} \\ {0.7} & {0} & {0.4}\end{array}\right]$ 1）马尔可夫矩阵性质： 1 阅读全文

摘要： 一、对角化 由$Ax=\lambda x$，根据上一节所讲，我们可以求出若干个特征值和特征向量，那么我们然后可以用来干什么呢？ 我们假设经过求解得到$n$个线性无关的特征向量，按列组成矩阵$S$，我们称$S$为特征向量矩阵，我们先来算一下$AS$： $AS=A[x_1 \space x_2 \spa 阅读全文

摘要： 一、特征向量 对于某个矩阵$A$，如果有$Ax=\lambda x$，则$x$是矩阵$A$的特征向量，$\lambda$是矩阵$A$的特征值，矩阵$A$可以作用于任何向量$x$，但我们感兴趣的是那些$x$向量，$Ax$之后的结果和$x$同向（平行于$x$），$\lambda$可以取0或者负值 解释： 阅读全文

摘要： 一、二阶矩阵的逆矩阵 $A^{-1}$的公式：$\left[\begin{array}{ll}{a} & {b} \\ {c} & {d}\end{array}\right]^{-1}=\frac{1}{a d-b c}\left[\begin{array}{rr}{d} & {-b} \\ {-c 阅读全文