随笔分类 -  机器学习

矩阵乘法的梯度计算
摘要:在神经网络中,我们经常要用到矩阵乘法,而BackProp过程中,要对系数矩阵的每一个元素求偏导数。这里来推导一下。 我们假设有如下一个函数:$y=f(AB)$,其中 1、$A$是$n\times m$矩阵,$B$是$m\times k$矩阵。 2、f是一个标量函数,参数是一个矩阵。 我们现在要求$\ 阅读全文

posted @ 2017-08-10 08:52 米老虎M 阅读(7163) 评论(1) 推荐(2)

深入理解设计矩阵(Design Matrix)
摘要:设计矩阵通常是用来描述数据集的一个方法。通常有m行n列, 1、每个行向量$\boldsymbol x^{(i)}$代表第$i$个实例 2、每个列向量$\boldsymbol x_j$代表第$j$个feature $X=\begin{bmatrix} \boldsymbol x_1 & \boldsy 阅读全文

posted @ 2017-08-09 16:34 米老虎M 阅读(8085) 评论(0) 推荐(0)

PRML中文版(马春鹏)勘误表
摘要:前言: PRML是严肃学习机器学习的首选教材。虽然内容略微陈旧,但是从写作水平来说,目前没有与之匹敌的其他读物。可惜我英语水平有限,原著读起来很容易疲劳,幸得网上流传的PRML中译版,整体流畅严谨,显然是译者在有相当理解的基础上翻译的。只是阅读的过程中偶有卡壳,结合英文版原著,发现有些小问题,这里都 阅读全文

posted @ 2017-06-17 18:37 米老虎M 阅读(24500) 评论(5) 推荐(4)

导航