巴蜀秀才

摘要： Swin Transformer 作者：elfin Top Bottom 1、Batch Normalization 使用BN时，我们只需要使用torch.nn.BatchNorm2d()指定通道数即可。它会在每个通道上分别求均值和方差在进行标准化。 1.1 数据准备 import torch Ba 阅读全文

摘要： DropPath 解析 作者：elfin Top Bottom DropPath是将深度学习模型中的多分支结构随机”删除“ https://github.com/yueatsprograms/Stochastic_Depth 1、DropPath实现 def drop_path(x, drop_pr 阅读全文

摘要： Swin Transformer 作者：elfin 资料来源：Swin 论文地址：https://arxiv.org/abs/2103.14030 项目地址：https://github.com/microsoft/Swin-Transformer Top Bottom 摘要 ​ 本文提出了一种新的 阅读全文

摘要： 参考资料：https://blog.csdn.net/fxwfxw7037681/article/details/114440117 中心损失 ​ centerloss是关注于类间距离，即我们认为同一类的对象距离其类别中心应该尽可能小。这种假设在聚类中是一个基本假设，注意这个假设与类间距无关！ ​ 阅读全文

摘要： LSTM::只需研究一次 作者：elfin 资料来源：torch.nn.LSTM Top Bottom 1、简述RNN ​ 在传统的统计学中，有一门专门介绍时间序列的课程。其主要研究事件的发生与时间(可以是广义的)有较强的关联，这时传统机器学习算法并不能很好地解决这种带有时序的数据预测、特征挖掘。随 阅读全文

摘要： BoTNet::Bottleneck Transformers for Visual Recognition(视觉识别的瓶颈transformer) 作者：elfin 资料来源：BoTNet Top Bottom 0、摘要 ​ 我们提出了BoTNet，一个简单但功能强大的骨干网络，可用于多种视觉任务 阅读全文

摘要： Pytoch--学习率 作者：elfin 资料来源：官网pytorch1.6.0 各种学习率曲线可视化参考：python黑洞网 Top Bottom 1、LambdaLR自定义学习率 torch.optim.lr_scheduler.LambdaLR 参数： optimizer（Optimizer） 阅读全文

摘要： RepVGG: Making VGG-style ConvNets Great Again 作者：elfin 资料来源：RepVGG论文解析 Top Bottom 1、摘要 ​ 我们提出了一种简单而强大的卷积神经网络结构，它具有类似VGG的推理结构，仅由3×3卷积和ReLU组成，而训练模型具有多分支 阅读全文

摘要： DB--数据增强、加载 作者：elfin 资料来源：DB源码 1、DataLoader简介 以train为例，模型为resnet50，使用配置experiments/seg_detector/totaltext_resnet50_deform_thre.yaml。 train_data_loader 阅读全文

摘要： torch的DataLoader 作者：elfin 资料来源：pytorch1.6官网 1、DataLoader简介 ​ torch.utils.data.DataLoader 类是PyTorch数据加载实用程序的核心。它表示可在数据集上的Python迭代器，并支持 映射风格、迭代风格的数据集； 自 阅读全文