摘要: Tensorflow 自适应学习速率 在模型的初期的时候,往往设置为较大的学习速率比较好,因为距离极值点比较远,较大的学习速率可以快速靠近极值点;而,后期,由于已经靠近极值点,模型快收敛了,此时,采用较小的学习速率较好,较大的学习速率,容易导致在真实极值点附近来回波动,就是无法抵达极值点。 在ten 阅读全文
posted @ 2017-07-02 13:02 狂徒归来 阅读(9594) 评论(0) 推荐(2) 编辑