摘要: 一、神经网络--反向传播详细推导过程中的公式推导 其中,aL和y为特征维度为n_out的向量,而||S||2为S的L2范数。 损失函数有了,现在我们开始用梯度下降法迭代求解每一层的W,b 首先是输出层第L层。注意到输出层的W,b满足下式: 求导用到的公式有: 1:标量对多个向量的链式求导法则:x→y 阅读全文
posted @ 2022-01-20 12:51 小菜鸡学智能 阅读(204) 评论(0) 推荐(0)