随笔分类 -  ML

cuda by example【读书笔记1】
摘要：cuda 1. 以前用OpenGL和DirectX API简介操作GPU，必须了解图形学的知识，直接操作GPU要考虑并发，原子操作等等，cuda架构为此专门设计。满足浮点运算，用裁剪后的指令集执行通用计算，不是仅限于执行图形计算，不仅可以任意读写内存，还可以访问共享内存。提供了许多功能加速计算，设计 阅读全文
posted @ 2018-10-12 20:33 demianzhang 阅读(866) 评论(0) 推荐(0)
L1与L2正则(转)
摘要：概念： L0范数表示向量中非零元素的个数：NP问题，但可以用L1近似代替。 L1范数表示向量中每个元素绝对值的和： L1范数的解通常是稀疏性的，倾向于选择：1. 数目较少的一些非常大的值 2. 数目较多的insignificant的小值。faster-RCNN里面的smooth-L1 loss就是L 阅读全文
posted @ 2018-08-07 14:10 demianzhang 阅读(1259) 评论(0) 推荐(0)