MSE与MAE

MAE和MSE的关系

MSE

\[MSE=\frac{1}{n} \sum_{i=1}^{n}\left(y_{i}-\hat{y}_{i}\right)^{2} \]

MAE

\[M A E=\frac{1}{n} \sum_{i=1}^{n}\left|y_{i}-\hat{y}_{i}\right| \]

MSE和MAE的关系，在A、B、C、D四个二维样本中，以横纵坐标轴表示MAE，则以A->B->C表示的弧线为MSE，从A-D的过程中，MAE增加，MSE降低，从D到C的过程中，MAE降低，MSE增加。因此，MAE和MSE并不存在正负相关的关系，当MAE和MSE同时降低，则训练过程比较好。