2021年12月8日
归一化方法 BN LN GN
摘要： Batch Normalization BN是最常用的一种归一化方式，以batch的维度做归一化，但这个维度并不是固定不变的，如训练和测试时一般不一样，训练的时候使用的是每个batch数据的方差和均值；BN训练时不使用全量训练集的均值和方差的原因是容易过拟合，不同batch的均值和方差存在差异，可以 阅读全文
posted @ 2021-12-08 14:40 Liang-ml 阅读(269) 评论(0) 推荐(0)