10 2019 档案

牛顿法与梯度下降法数学公式推导过程
摘要：迭代更新数学公式推导过程 1、牛顿法 首先对于有n个变量的函数的一阶导数为： 其次对于其二阶导数为： 之后关于目标函数的包含二阶导数的泰勒展开式为： 这时将看成的函数，则根据函数的最小值性质，当偏导数等于0时出取得，从而得到，所以，根据等式的特点得到，只有两者都取0时才能使等式等于0，所以得： （最 阅读全文
posted @ 2019-10-05 14:42 阳墨余 阅读(2636) 评论(0) 推荐(1)

分享到：