10 2014 档案

摘要:一般来说,训练神经网络的目标函数是非常不好优化的,比如说,有非常非常多的局部最优值等等。通常认为使用 pre-training 的结果作为 back-propagation 的初始化有助于将 (stochastic) gradient descent 的初始搜索点放在一个比较好的地方,从而收敛到... 阅读全文
posted @ 2014-10-23 09:31 FeiC 阅读(213) 评论(0) 推荐(0)