2025年1月22日
8.5.5 梯度截断
摘要： 看到一大堆NaN了就是梯度爆炸了 式\((8.25)\)的\(g\)是所有层的梯度，这个式子的意思就是说如果\(g\)的长度太长，我们就把他拉回来 阅读全文
posted @ 2025-01-22 09:54 最爱丁珰 阅读(8) 评论(0) 推荐(0)