随笔分类 -  梯度下降

摘要:1.Softmax回归概念Softmax回归可以用于多类分类问题,Softmax代价函数与logistic 代价函数在形式上非常类似,只是在Softmax损失函数中对类标记的 k\textstyle kk 个可能值进行了累加。注意在Softmax回归中将 x... 阅读全文
posted @ 2018-11-02 10:09 hanzi5 阅读(1279) 评论(0) 推荐(0)
摘要:接上篇4.梯度下降算法《斯坦福大学公开课 :机器学习课程》吴恩达讲解第二课时,是直接从梯度下降开始讲解,最后采用向量和矩阵的方式推导了解析解,国内很多培训视频是先讲解析解后讲梯度下降,个人认为梯度下降算法更为重要,它是很多算法(逻辑回归、神经网络)都可以共用... 阅读全文
posted @ 2018-10-23 16:07 hanzi5 阅读(424) 评论(0) 推荐(0)