摘要: "1. DNN神经网络的前向传播(FeedForward)" "2. DNN神经网络的反向更新(BP)" "3. DNN神经网络的正则化" 1. 前言 和普通的机器学习算法一样,DNN也会遇到过拟合的问题,需要考虑泛化,这里我们就对DNN的正则化方法做一个总结。 2. DNN的L1和L2正则化 想到 阅读全文
posted @ 2018-12-12 22:59 hyc339408769 阅读(2630) 评论(0) 推荐(0) 编辑
摘要: 1. 前言 我们在学习人工智能的时候,不管是机器学习还是深度学习都需要经历一个调参的过程,参数的好坏直接影响这模型效果的好坏。今天我们介绍下在深度学习中,调参的技巧主要分为哪些。 2. 深度学习中的主要参数 学习率(learning rate):学习率的取值一般是1、0.1、0.01、0.001等, 阅读全文
posted @ 2018-12-12 21:48 hyc339408769 阅读(4733) 评论(0) 推荐(0) 编辑