博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

2018年10月5日

优化算法—梯度下降

摘要： 转自：https://www.cnblogs.com/shixiangwan/p/7532858.html 梯度下降法，是当今最流行的优化（optimization）算法，亦是至今最常用的优化神经网络的方法。本文旨在让你对不同的优化梯度下降法的算法有一个直观认识，以帮助你使用这些算法。我们首先会考察 阅读全文

posted @ 2018-10-05 21:53 MwingFly 阅读(2612) 评论(0) 推荐(0)

拉格朗日乘数法

摘要： 转自：http://www.cnblogs.com/maybe2030/p/4946256.html 1. 拉格朗日乘数法的基本思想 作为一种优化算法，拉格朗日乘子法主要用于解决约束优化问题，它的基本思想就是通过引入拉格朗日乘子来将含有n个变量和k个约束条件的约束优化问题转化为含有（n+k）个变量的 阅读全文

posted @ 2018-10-05 17:04 MwingFly 阅读(735) 评论(0) 推荐(0)

几种常见的优化算法

摘要： 转自：http://www.cnblogs.com/maybe2030/ 我们每个人都会在我们的生活或者工作中遇到各种各样的最优化问题，比如每个企业和个人都要考虑的一个问题“在一定成本下，如何使利润最大化”等。最优化方法是一种数学方法，它是研究在给定约束之下如何寻求某些因素(的量)，以使某一(或某些 阅读全文

posted @ 2018-10-05 16:40 MwingFly 阅读(9069) 评论(0) 推荐(0)