marsggbo

摘要： 花了一天时间大致了解了强化学习一些经典算法，总结成如下笔记。笔记中出现不少流程图，不是我自己画的都标了出处。 铺垫 1. Bellman方程 在介绍强化学习算法之前先介绍一个比较重要的概念，就是 Bellman方程 ，该方程表示动作价值函数，即在某一个状态下，计算出每种动作所对应的value（或者说 阅读全文

摘要： 一、方法总结 Network Pruning Knowledge Distillation Parameter Quantization Architecture Design Dynamic Computation 二、Network Pruning 模型通常是过参数的，即很多参数或者neuron 阅读全文

摘要： 在 Pytorch 中一种模型保存和加载的方式如下: 其实返回的是一个 ，存储了网络结构的名字和对应的参数，下面看看源代码如何实现的。 state_dict 可以看到state_dict函数中遍历了4中元素，分别是 ,`_buffers _modules _state_dict_hooks stat 阅读全文

摘要： 下文都将 简写成 Module: 就是我们常用的 类，你定义的所有网络结构都必须继承这个类。 Buffer: buffer和parameter相对，就是指那些不需要参与反向传播的参数 示例如下： Parameter: 是 ，也就是组成Module的参数。例如一个 通常由 和`bias require 阅读全文

摘要： 参考： "https://petewarden.com/2015/04/20/why gemm is at the heart of deep learning/" 平常都是无脑使用Pytorch提供的 方法，但是并不关心具体该如何实现，原来是把卷积操作转化成矩阵乘法，而不是真的通过滑动卷积核来做卷 阅读全文

摘要： Github上我们经常fork其他人的代码，然后经过一通魔改后弄出"自己"的东西。但是现在我遇到了这么一个需求，就是我已经公开了一个自己的库(暂且叫 )，然后我想基于自己开发的库再创建新的功能，但是又不想让新功能公开，一个很自然的想法是库 保持公开，然后新创建一条分支隐藏，可惜的是github并不支 阅读全文

摘要： 我的博客是参考别人的代码修改的，具体代码参见 https://github.com/marsggbo/Cnblogs-Theme-SimpleMemory 阅读全文

摘要： torchline地址：https://github.com/marsggbo/torchline 相信大家平时在使用Pytorch搭建网络时，多少还是会觉得繁琐，因为我们需要搭建数据读取，模型，训练，checkpoints保存等等一系列模块。每当切换到新的任务后很多情况下之前的代码不能复用，或者说 阅读全文

摘要： 原论文：[Auto FPN: Automatic Network Architecture Adaptation for Object Detection Beyond Classification](http://openaccess.thecvf.com/content_ICCV_2019/pap 阅读全文

摘要： 图形学中中对于矩阵常涉及的操作有以下几种： 缩放 旋转 平移 在介绍为什么要引入齐次坐标之前先介绍这三个操作的线性代数的表达形式。为了说明方便以二维进行举例说明。 缩放 假设有一个向量为$[x1,y1]$,那么如果要使得沿着x轴和y轴方向分别伸缩$k_x,k_y$倍，写成矩阵的形式如下： $$ \b 阅读全文