摘要: 本文承接上篇 https://zhuanlan.zhihu.com/p/24709748,来讲矩阵对矩阵的求导术。使用小写字母x表示标量,粗体小写字母表示列向量,大写字母X表示矩阵。矩阵对矩阵的求导采用了向量化的思路,常应用于二阶方法求解优化问题。 首先来琢磨一下定义。矩阵对矩阵的导数,需要什么样的 阅读全文
posted @ 2019-09-18 15:13 psztswcbyy 阅读(1324) 评论(0) 推荐(0) 编辑
摘要: 矩阵求导的技术,在统计学、控制论、机器学习等领域有广泛的应用。鉴于我看过的一些资料或言之不详、或繁乱无绪,本文来做个科普,分作两篇,上篇讲标量对矩阵的求导术,下篇讲矩阵对矩阵的求导术。本文使用小写字母x表示标量,粗体小写字母表示(列)向量,大写字母X表示矩阵。 首先来琢磨一下定义,标量f对矩阵X的导 阅读全文
posted @ 2019-09-18 15:11 psztswcbyy 阅读(913) 评论(0) 推荐(0) 编辑