摘要: 最近deep learning的确很火,虽然学术上不甚了解,但是其背后的一些故事还是很有趣的,纯八卦。(八卦来自 余凯 李航,对理论感兴趣的请观看余凯老师的视频)神经网络NN的第一次挑战是异或问题,虽然BP的出现证明了非线性问题的可解性,但是在90年代NN经历了一个寒冬(与大热的Boosting、SVM相比)。余凯认为原因如下:1、非凸,无法全局最优2、过多的技巧难以驾驭(单反VS傻瓜)3、理论上难以分析2006年,Hinton在science上发飙了用NN进行降维的一篇文章,开启了DL时代。很多人对Hinton的工作的有效性表示了怀疑(Hinton经常被人拍砖),CV的大牛(Jitendra 阅读全文
posted @ 2012-12-07 18:38 故国旧梦 阅读(2354) 评论(0) 推荐(1) 编辑