正文内容加载中...
posted @ 2015-05-25 22:55 仙守 阅读(1693) 评论(0) 推荐(1) 编辑
摘要:联邦学习大火,主要是解决数据孤岛问题,即如何在符合数据隐私的基础上,实现多方数据不出本地,但是却能联合训练一个共有大模型的目的,对于需要中心的纵向联邦学习,是需要中心先下发公钥,而后期会出现中心能够完全掌握整个模型的情况。那么在更严格情况,AB都互不信任,C放在哪都不合适。 1 准备部分 这里以线性 阅读全文
posted @ 2020-10-15 12:01 仙守 阅读(32) 评论(0) 推荐(0) 编辑
摘要:本人虽然研二开始接触cuda,但是终究未从事cuda开发,故而皆为零零散散的知识,虽然看了好几本cuda编程的书籍以及官网的文档(肯定没看全啊,我也不是专门从事cuda开发),市面上几乎都是关于如何cuda编程的书籍,而这些书籍中也看过不少《CUDA C编程权威指南》,《CUDA专家手册》,《CUD 阅读全文
posted @ 2020-09-10 13:55 仙守 阅读(67) 评论(0) 推荐(1) 编辑
摘要:bandsnatch 不好用,不符合自己心意,所以自己就简单弄了个同步的 # -*- coding: utf-8 -*- import re import os import shutil import urllib import json import copy import wget impor 阅读全文
posted @ 2020-06-08 20:40 仙守 阅读(174) 评论(0) 推荐(0) 编辑
摘要:1 引言 方便检索 2 名词解释 FLOPS:“每秒浮点运算次数”,“每秒峰值速度”,是“每秒所执行的浮点运算次数”(floating-point operations per second)的缩写。所谓的“浮点运算”,实际上包括了所有涉及小数的运算。这类运算在某类应用软件中常常出现,而它们也比整数 阅读全文
posted @ 2020-03-17 11:40 仙守 阅读(734) 评论(0) 推荐(0) 编辑
摘要:先定义几个关键字: 任务:用户一次上传的数据集并发起的automl任务,比如一次ocr任务,一次图像分类任务。 模型:一次任务中,需要运行的多个模型,比如ocr任务,需要ctpn模型,需要crnn模型。 单模型:一个模型只需要单个节点即可(只适合小数据集); 分布式模型:一个模型需要多个节点才能运行 阅读全文
posted @ 2019-12-19 19:39 仙守 阅读(247) 评论(0) 推荐(0) 编辑
摘要:很多时候,我们是基于python进行模型的设计和运行,可是基于python本身的速度问题,使得原生态python代码无法满足生产需求,不过我们可以借助其他编程语言来缓解python开发的性能瓶颈。这里简单介绍个例子,以此完成如何先基于cuda编写瓶颈函数,然后在将接口通过cpp进行封装,最后以库的形 阅读全文
posted @ 2019-04-19 13:20 仙守 阅读(1989) 评论(1) 推荐(0) 编辑
摘要:首先借助qqwweee/keras-yolo3中的convert.py和tensorrt例子yolov3_onnx,并重新编写了代码,实现将darknet格式的yolov3的yolov3.cfg和yolov3.weights转换成keras(tensorflow)的h5格式 1 将darknet格式 阅读全文
posted @ 2019-03-21 15:28 仙守 阅读(11007) 评论(27) 推荐(0) 编辑
摘要:本文是基于TensorRT 5.0.2基础上,关于其内部的yolov3_onnx例子的分析和介绍。 本例子展示一个完整的ONNX的pipline,在tensorrt 5.0的ONNX-TensorRT基础上,基于Yolov3-608网络进行inference,包含预处理和后处理。 首先,从作者网站下 阅读全文
posted @ 2019-03-19 14:59 仙守 阅读(10045) 评论(9) 推荐(0) 编辑
摘要:本文是基于TensorRT 5.0.2基础上,关于其内部的uff_custom_plugin例子的分析和介绍。 本例子展示如何使用cpp基于tensorrt python绑定和UFF解析器进行编写plugin。该例子实现一个clip层(以CUDA kernel实现),然后封装成一个tensorrt 阅读全文
posted @ 2019-03-15 17:57 仙守 阅读(2922) 评论(0) 推荐(0) 编辑
摘要:本文是基于TensorRT 5.0.2基础上,关于其内部的fc_plugin_caffe_mnist例子的分析和介绍。 本例子相较于前面例子的不同在于,其还包含cpp代码,且此时依赖项还挺多。该例子展示如何使用基于cpp写的plugin,用tensorrt python 绑定接口和caffe解析器一 阅读全文
posted @ 2019-03-14 19:25 仙守 阅读(1685) 评论(0) 推荐(0) 编辑