文章分类 -  上手MindSpore系列

上一页 1 ··· 3 4 5 6 7 8 9 10 11 ··· 17 下一页
通过MindSpore Serving gRPC客户端发送超大消息报错
摘要：现象： 某同学通过MindSpore Serving gRPC客户端向服务器发送消息时，发生了报错，错误信息如下： test_serving_client_grpc.py::test_serving_grpc_pressure_big_message E0413 20:03:08.764913058 阅读全文
posted @ 2021-12-30 19:29 MS小白 阅读(130) 评论(0) 推荐(0)
【实验课程】MindSpore1.0:MobileNetV2网络实现微调（关键词：MobileNetV2、Fine Tune)
摘要：使用MobileNetV2网络实现微调（Fine Tune） 实验介绍 本实验介绍使用MindSpore，在CPU环境下，mobileNetV2网络做微调训练与验证。 实验目的 掌握如何使用MindSpore进行微调实验开发。 理解微调方法的原理、方法。 了解如何使用MindSpore进行Mobil 阅读全文
posted @ 2021-12-30 19:28 MS小白 阅读(482) 评论(0) 推荐(0)
可解释AI如何帮助图片分类模型调试调优-可解释AI系列博文（二）
摘要：本文是MindSpore1.1版本可解释AI系列的第二篇文章, 第一篇文章“MindSpore首次开源可解释AI能力”主要对可解释AI和MindSpore1.1开源的可解释AI能力做总体介绍, 本文将深入探讨MindSpore可解释AI如何帮助图片分类模型的调试调优。 下面结合MindSpore1. 阅读全文
posted @ 2021-12-30 19:27 MS小白 阅读(141) 评论(0) 推荐(0)
mindspore v1.1使用体验，根据官网资料对retinaface_resnet50写summary和profiler
摘要：一． 运行环境MindSpore版本号：1.1.0；硬件平台：GPU；Python版本号：3.7.5；操作系统：linux Ubuntu二． 运行步骤1.下载最新版本并安装 下载https://gitee.com/mindspore/mindspore.git仓库，修改retinaface_resn 阅读全文
posted @ 2021-12-30 19:27 MS小白 阅读(145) 评论(0) 推荐(0)
MindSpore模型精度调优实战（一）精度问题的常见现象、原因和简要调优思路
摘要：MindSpore模型精度调优实战（一） 精度问题的常见现象、原因和简要调优思路 MindSpore团队 引子：在模型的开发过程中，精度达不到预期常常让人头疼。为了帮助用户解决模型调试调优的问题，我们为MindSpore量身定做了可视化调试调优组件：MindInsight。我们还梳理了针对常见精度问 阅读全文
posted @ 2021-12-30 19:26 MS小白 阅读(248) 评论(0) 推荐(0)
MindSpore模型精度调优实战（二）精度调试调优思路
摘要：MindSpore模型精度调优实战（二） 精度调试调优思路 MindSpore团队 引子：在模型的开发过程中，精度达不到预期常常让人头疼。为了帮助用户解决模型调试调优的问题，我们为MindSpore量身定做了可视化调试调优组件：MindInsight。我们还梳理了针对常见精度问题的调试调优指南，将以 阅读全文
posted @ 2021-12-30 19:10 MS小白 阅读(98) 评论(0) 推荐(0)
提高模型的训练性能（一）
摘要：梯度累积引入Mini-batch的概念，首先对每个Mini-batch的数据计算loss和梯度，但不立即更新模型参数，而是先对所得梯度进行累加，然后在指定数量（N）个Mini-batch之后，用累积后的梯度更新网络参数。下次训练前清空过往累积梯度后重新累加，如此往复。最终目的是为了达到跟直接用N*M 阅读全文
posted @ 2021-12-30 19:09 MS小白 阅读(122) 评论(0) 推荐(0)
【MindSpore两日训练营第五期笔记】开头结尾三份作业总结篇
摘要：非常高兴参加了第五期两日训练营，收获颇多，而且需要慢慢消化的东西很多。本来雄心壮志，想要完成11个作业，拿到神秘大奖看看。我只是好奇神秘大奖是什么，老天就满足下我的好奇心吧。 可惜天不如人愿，这次的训练营做作业的时间跟昇腾模型大赛的时间有冲突，主要是本人能力有限，调模型调的昏天暗地，导致根本没有时间 阅读全文
posted @ 2021-12-30 19:09 MS小白 阅读(34) 评论(0) 推荐(0)
MindSpore 1.2.0-rc1版本量子机器学习体验
摘要：版本号截图 硬件平台与操作系统 体验内容学习笔记 看了MindSpore 1.2.0-rc1版本最新特性，发现了有量子机器学习，遂体验一番。 参数化量子线路（Parameterized quantum circuit, PQC）是进行量子机器学习的一种途径，量子-经典混合机器学习架构MindQuan 阅读全文
posted @ 2021-12-30 19:08 MS小白 阅读(34) 评论(0) 推荐(0)
提高模型的训练性能（二）
摘要：对于需要重复访问远程的数据集或需要重复从磁盘中读取数据集的情况，可以使用单节点缓存算子将数据集缓存于本地内存中，以加速数据集的读取。 配置环境 使用缓存服务前，需要安装MindSpore，并设置相关环境变量。以Conda环境为例，设置方法如下： export LD_LIBRARY_PATH=$LD_ 阅读全文
posted @ 2021-12-30 19:08 MS小白 阅读(30) 评论(0) 推荐(0)
浅谈MindSpore之一：训练性能为何能够近似线性提升
摘要：萌新一枚，之前断断续续使用了一段时间的MindSpore框架，在和伙伴们交流的过程中，很多人发现MindSpore相比于tensorflow/pytorch在训练性能上有着近乎线性的提升，而且是在昇腾芯片上才表现出来，遂一直好奇这其中的个中缘由。最近看了《昇腾AI处理器架构与编程》这本书后，茅塞顿开 阅读全文
posted @ 2021-12-30 19:07 MS小白 阅读(130) 评论(0) 推荐(0)
MindSpore模型精度调优实战（三）常见精度问题简介
摘要：MindSpore模型精度调优实战（三）： 常见精度问题简介 MindSpore团队 引子：在模型的开发过程中，精度达不到预期常常让人头疼。为了帮助用户解决模型调试调优的问题，我们为MindSpore量身定做了可视化调试调优组件：MindInsight。我们还梳理了针对常见精度问题的调试调优指南，将 阅读全文
posted @ 2021-12-30 19:06 MS小白 阅读(57) 评论(0) 推荐(0)
Erhsh-python之EMS使用指南
摘要：简介 MindSpore网络组经常会有各种各样的问题需要定位，我们经常感觉比较麻烦的场景有： 这个环境本身是否有问题？简单网络能否跑通？ 这个环境上如果没有我要的数据集怎么办？拷贝过来太大，能否造一份假的数据集定位？ 新开发一个网络，除了写数据预处理的脚本，网络结构的定义外，我们还要关注怎么进行单P 阅读全文
posted @ 2021-12-30 19:04 MS小白 阅读(52) 评论(0) 推荐(0)
MindSpore运行环境信息获取及dataset并行数报错的解决
摘要：本文主要分享一个和运行环境相关报错的解决方案，不知道大家有没有遇到过"ValueError: num_parallel_workers exceeds the boundary between 1 and XXX !"的报错。然而并不清楚变量"num_parallel_workers"的取值有何依据 阅读全文
posted @ 2021-12-30 19:03 MS小白 阅读(110) 评论(0) 推荐(0)
关于model.train()训练时传入数据参数的问题
摘要：mindspore有一键训练功能，可以很方便的使用model.train()进行训练，示例代码如下 net = Net() loss = nn.SoftmaxCrossEntropyWithLogits() optim = nn.Momentum(params=net.trainable_param 阅读全文
posted @ 2021-12-30 19:03 MS小白 阅读(207) 评论(0) 推荐(0)
MindSpore进行NLP模型开发的常见问题与调优经验分享
摘要：本文分享我在参与ms的nlp模型开发的过程中，遇到的一些“杂症”，大家如果有遇到类似的问题，或者有更好的解决办法，欢迎一起交流。 1、dataset的batch问题 当数据集进行batch划分后，最后一个batch小于batch_size时，模型训练加载数据时将会出现异常报错内容如下：epoch: 阅读全文
posted @ 2021-12-30 19:02 MS小白 阅读(462) 评论(0) 推荐(0)
一点关于多机训练失败的问题定位的经验分享
摘要：近期解决了一个多机数据并行训练失败的问题（https://bbs.huaweicloud.com/forum/thread-133720-1-1.html），这个问题比较有代表性，故把一些定位经验分享出来，供用户参考。 1. 用户的问题场景是单机8卡训练能够正常，但是两机16卡训练失败。HCCP报错 阅读全文
posted @ 2021-12-30 19:02 MS小白 阅读(245) 评论(0) 推荐(0)
ResNet50性能调优分享
摘要：网络训练跑通了，精度OK了，对很多人来说可能已经万事大吉了，但如果网络需要在生产环境跑，还有一个点不得不去关注，那就是性能。对于大的网络，训练一次可能需要上月的时间，这时候就真正的体会到时间就是金钱了。提高网络的性能，缩短训练的时间，可能会节省上百万的金钱。下面给大家介绍下之前对ResNet50网络 阅读全文
posted @ 2021-12-30 19:01 MS小白 阅读(422) 评论(0) 推荐(0)
金字塔项目（二）：MindSpore-GPU在同一主机的不同环境中的性能粗评
摘要：背景 在Win10游戏本中搭建MindSpore-GPU的深度学习环境中，MindSpore-GPU利用Windows，WSL，Ubuntu和Docker的环境终于可以跑起来，而且肉眼可见GPU的确参与了运算。这一段时间用下来，我并没有踩上风火轮的欣快，总感觉哪里不对劲呢。本人不谙测试之道，但是看着 阅读全文
posted @ 2021-12-30 18:58 MS小白 阅读(90) 评论(0) 推荐(0)
小孢子的神奇之旅-如何阅读MindSpore报错信息(1)
摘要：MindSpore是什么？打开google翻译，得到如下的结果。 “心灵孢子”……有没有不明觉厉？刚看到这个名字的时候，让我想起了以前玩过的一个叫“Spore”的电脑游戏，玩家从一个孢子不断演化，建立文明，最后塑造整个世界。 “心灵孢子”是不是也要塑造整个世界？继续研究“心灵孢子”到底是个啥？g家搜 阅读全文
posted @ 2021-12-30 18:58 MS小白 阅读(24) 评论(0) 推荐(0)

上一页 1 ··· 3 4 5 6 7 8 9 10 11 ··· 17 下一页