机器学习中的梯度问题

  梯度是一组偏微分的向量。而导数和偏微分都是标量,是某个方向上的变化程度。

凸函数

 

鞍点:

 

  哪些因素会影响搜索过程?

  1.学习率

  

 

  2.初始化状态

  3.逃离路线

 

posted @ 2023-02-18 21:23  ForMei  阅读(39)  评论(0)    收藏  举报