摘要：baselines算法库baselines/common/input.py模块代码： import numpy as np import tensorflow as tf from gym.spaces import Discrete, Box, MultiDiscrete def observat
阅读全文
摘要：原文地址： https://www.cnblogs.com/liuzhan709/p/10092679.html xavier初始化出自论文Understanding the difficulty of training deep feedforward neural network, 论文讨论的是
阅读全文
摘要：版权声明：本文为CSDN博主「shuzfan」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。原文链接：https://blog.csdn.net/shuzfan/article/details/51338178 “Xavier”初始化方法是一种很有效的神经网络初始
阅读全文
摘要：版权声明：本文为CSDN博主「Mr.徐zZZZ」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。 原文链接： https://blog.csdn.net/xu19950525/article/details/108032291 比较抽象，下面还是举个例子来说明： 首
阅读全文
摘要：版权声明：本文为CSDN博主「TahoeWang」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。原文链接：https://blog.csdn.net/sinat_30106697/article/details/88049369 TensorFlow中如果没有对网
阅读全文
摘要：baselines算法库baselines/bench/monitor.py模块代码： __all__ = ['Monitor', 'get_monitor_files', 'load_results'] from gym.core import Wrapper import time from g
阅读全文
摘要：baselines根目录下logger.py模块代码： import os import sys import shutil import os.path as osp import json import time import datetime import tempfile from coll
阅读全文
摘要：retro_wrappers.py模块代码： from collections import deque import cv2 cv2.ocl.setUseOpenCL(False) from .atari_wrappers import WarpFrame, ClipRewardEnv, Fram
阅读全文
摘要：版权声明：本文为CSDN博主「Totoro-wen」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。原文链接：https://blog.csdn.net/qq_32526087/article/details/106350530 1.问题描述 2.解决方案 （1）D
阅读全文
摘要：版权声明：本文为CSDN博主「时光碎了天」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。原文链接：https://blog.csdn.net/u013289254/article/details/103429257 笔者在训练模型的时候，突然偶遇这个问题，即训练一
阅读全文
摘要：如题： 在使用深度学习框架时如果同时也在使用opencv那么有一些设置是需要设定的，第一个就是在python代码中设定禁止使用opencl： cv2.ocl.setUseOpenCL(False) opencl和cuda的基本功能一致： opencl和cuda当年是作为同等定位的软件产品的，但是后来
阅读全文
摘要：模块代码： import multiprocessing as mp import numpy as np from .vec_env import VecEnv, CloudpickleWrapper, clear_mpi_env_vars def worker(remote, parent_re
阅读全文
摘要：baselines算法库设计可以和多个并行环境进行交互，也就是并行采样，实现多进程并行采样的模块为subproc_vec_env.py，与此相对的只实现单个进程下多环境交互的模块即为本文所要讲的dummy_vec_env.py模块。 我们可以认为dummy_vec_env.py模块是属于对照或调试模
阅读全文
摘要：疫情期间自己在家窝着，没有饭店能去，实在没得吃了就煮个方便面，煮方便面的必备配料一定是两个鸡蛋和一根火腿肠了。 但是自己煮荷包蛋的时候总是糊锅，为此好好总结一下。 个人体会： 分别使用两个锅：煮汤锅和炒菜锅 下荷包蛋的时机分别为：水沸腾时和水温时 电磁炉的火力均为2kw 。 尝试1： 煮汤锅、2kw
阅读全文
摘要：util.py模块代码： """ Helpers for dealing with vectorized environments. """ from collections import OrderedDict import gym import numpy as np def copy_obs_
阅读全文
摘要：filter_observation.py模块中类 FilterObservation(ObservationWrapper) 的理解。 代码： import copy from gym import spaces from gym import ObservationWrapper class F
阅读全文
摘要：看代码的过程中看到有这样的调用： from gym.wrappers import FlattenObservation if sinstance(env.observation_space, gym.spaces.Dict): env = FlattenObservation(env) 不是很理解
阅读全文
摘要：common/atari_wrappers.py模块代码如下； import numpy as np import os os.environ.setdefault('PATH', '') from collections import deque import gym from gym impor
阅读全文
摘要：common/vec_env/vec_env.py模块内容： import contextlib import os from abc import ABC, abstractmethod from baselines.common.tile_images import tile_images cl
阅读全文
摘要：common/wrapper.py模块： import gym class TimeLimit(gym.Wrapper): def __init__(self, env, max_episode_steps=None): super(TimeLimit, self).__init__(env) se
阅读全文
摘要：该模块只有一个函数，全部内容： import numpy as np def tile_images(img_nhwc): """ Tile N images into one big PxQ image (P,Q) are chosen to be as close as possible, an
阅读全文
摘要：baselines算法库地址： https://gitee.com/devilmaycry812839668/baselines 对baselines算法库中 run.py模块代码分析： 记录gym所有的游戏环境： _game_envs = defaultdict(set) for env in g
阅读全文
摘要：原文地址： https://developer.aliyun.com/article/822654 简介： 在近日召开的 ICRA （国际机器人与自动化会议）大会上，上海交大-非夕科技联合实验室展示了最新研究成果「AnyGrasp」（https://graspnet.net/anygrasp.htm
阅读全文
摘要：这315过的我是直来气，昨天爆出双汇问题的时候我在家正啃这双汇的王中王，今天爆出康师傅的问题我正好在家吃着康师傅红烧牛肉面，你说这事气人不气人，在家不会做饭的人真的是没法子。 “土坑酸菜”问题说明食品安全问题依然严峻，保证人民群众的食品安全是一个长期的事业，年年315年年都有这么多问题发生，要我说国
阅读全文
摘要：视频地址： https://www.bilibili.com/video/BV1dh41187x5/?spm_id_from=333.788.recommend_more_video.18 平时总是会看一些机器臂智能抓取的视频，但是重来没有看过机器臂制造的视频，同时也是十分的好奇，这里找到了一个很易
阅读全文
摘要：平时没事看新闻，没想到尽看到一些要人来气的新闻： https://baijiahao.baidu.com/s?id=1727324625726818347&wfr=spider&for=pc 踢球是份工作，是份需要责任心的工作，而看看中国男足整天爆各种负面新闻，一天天的以公子哥、老爷兵的形象出现，一
阅读全文
摘要：有人能想象到这样的一个画面，我在家里正吃着双汇的王中王看着新闻，却看到了这个： https://haokan.baidu.com/v?pd=wisenatural&vid=5271546704499256868 更气人的是我一看网上的各个平台还在卖这个，这东西还能卖吗，这一波都是被生产厂家和销售厂家
阅读全文
摘要：mujoco的安装与mujoco_py的安装参见： https://www.cnblogs.com/devilmaycry812839668/p/16004320.html mujoco_py安装成功后运行自带的example中的例子，发现报错： ERROR: GLEW initalization
阅读全文
摘要：下载开源版本的mujoco二进制文件： wget https://github.com/deepmind/mujoco/releases/download/2.1.1/mujoco-2.1.1-linux-x86_64.tar.gz 解压： tar -zxvf mujoco-2.1.1-linux-
阅读全文
摘要：如题，经常可以在文章中看到这个SOTA的词汇，也就是state of the art，这个词汇我是看着感觉十分的不懂，这个词汇有时候被用作名词有时候又被用作形容词，但是不管用作形容词还是名词大多数人的用法形式都是state of the art ，对此我有些不理解于是就做些系统的研究。 关于stat
阅读全文
摘要：baselines算法库不做过多介绍，个人认为这是公开是所有reinforcement learning算法库中最权威的，虽然没有后期更新，也就是没有了学术界的state of the art , 但还是十分的经典。 算法库地址： https://github.com/openai/baseline
阅读全文
摘要：如题，自己有两台电脑，一个安装的window10，一个安装的是Ubuntu20.04，两个电脑之间经常需要传文件，这个时候总是用U盘来回导文件就变得十分的不方便，于是就想到了设置网络共享。 本文的做法是在Ubuntu20.04系统上设置共享文件并进行简单设置。 在Ubuntu上安装samba: su
阅读全文
摘要：本文分享一篇nature的论文： Vector-based navigation using grid-like representations in artificial agents 有中文相关的翻译资料： https://www.cnblogs.com/lucifer1997/p/133564
阅读全文
摘要：原文地址： https://news.eeany.cn/news/416675-19.html 神秘的网格细胞：大脑内置GPS 从家出发到新的地点，再原路返回，从中选择尽可能的捷径，这是绝大多数动物都能胜任的简单任务。然而，大脑这种本能的导航机制尚未被完全理解。 科学家们在动物和人类大脑中找到了三种
阅读全文
摘要：原文地址： https://baijiahao.baidu.com/s?id=1600279012514462353&wfr=spider&for=pc 5月9日，DeepMind 团队与 UCL 在 Nature 上发表重磅研究成果：人工智能演化出和动物大脑类似的空间导航能力，引起人工智能和神经科
阅读全文
摘要：网上闲逛找到的一篇文章，介绍模仿学习的，题目： Imitate with Caution: Offline and Online Imitation 之所以转载这个文章是因为这个文章还是蛮浅显易懂的，而且还蛮有知识量的，尤其是自己以前对模仿学习的了解也比较粗浅，看了这个文章后学习到了知识。 离线模仿
阅读全文
摘要：视频地址： https://www.youtube.com/watch?v=aJ957mEAFis 一些个人的体会： 为了社会的持续发展以前苏联和俄罗斯为思考对象我们应该注意： 1. 大力持续不间断的反腐，腐败是社会崩塌的最直接原因； 2. 减少贫富差距，控制寡头经济，缩小垄断经济的规模，持续支持中
阅读全文
摘要：看伪代码时突然看到这样的一个Ps标注， ties broken arbitrary， 不明白是啥意思，后来看到下文：https://blog.csdn.net/kangkanglhb88008/article/details/123175523 才知道这个词语在伪代码中一般用在arg max f(a
阅读全文
摘要：在网上找到了一个vim插件的汇总网站，上面有对vim插件进行汇总、简介、使用排名等，十分适合vim用户在上面寻找一些可用的插件。 网址： https://vimawesome.com/ 虽然我没有太用这个网站，但是这个网站还是保存下来以备以后有需要的时候能找的到。 vim最有名的就是它的高可扩展性，
阅读全文
摘要：原文地址： https://www.cnblogs.com/litifeng/p/11675547.html 个人推荐的一个视频教程地址： 上古神器Vim：从恶言相向到爱不释手 - 终极Vim教程01 - 带你配置属于你自己的最强IDE_哔哩哔哩_bilibili 最常用3个折叠命令 1、反复打开关
阅读全文
摘要：网上翻到一个视频： https://www.youtube.com/watch?v=WAwi7sbJL3U 得知了这样的一个名词，那就是“路西法效应”，查了查百度 百科： 路西法效应：好人是如何变成恶魔的 这个路西法效应讲的就是一个人所处的情境或者说是环境是可以影响一个的性格、品质、表现等甚至是道德
阅读全文
摘要：本人Ubuntu18.04 Desktop系统安装桌面壁纸应用variety，设置如下： 使用大致两个小时，主机为NVIDIA显卡，查看显存使用情况： 可以发现随着使用时间的增加variety会逐渐增加对显存的占用，1个G、2个G、4个G，甚至更多，这个variety桌面壁纸应用确实很好看，但是咋这
阅读全文
摘要：代码补全应用kite主要对Python代码进行补全，或者说kite是针对现在的人工智能Python代码（pytorch、tensorflow）等做补全的，而且在Python代码补全上kite可以说是现如今表现最好的了。 说起来也是有意思，IT技术一直都很火，但是IT技术的一些基础支持却鲜有人来做，从
阅读全文
摘要：交代一下使用场景，个人平时经常使用Ubuntu系统，由于不喜欢总在一个地方呆但是来回搬电脑又不是十分的方便，于是想到了一个好的方案，那就是把Ubuntu系统安装到移动硬盘中，这样不论是在家还是在实验室带着一个移动硬盘走就可以了，十分的方便。因为如此，于是就有了这样的一个需求，就是把Ubuntu系统安
阅读全文
摘要：参考文章： 删除Grub，windows引导修复-百度经验 (baidu.com) 自己的笔记本电脑一直都是使用windows和Ubuntu双系统，之所以这样搞是因为自己以前没有多余的硬盘，从经济的角度出发就把Ubuntu和windows10都做在了一个固态上，都是后来windows10的文件越来越
阅读全文
摘要：如题所述，近日在自己Ubuntu18.04的系统上安装了alacritty终端，安装这个终端主要原因就是可以出现透明桌面，说白了就是漂亮，beautiful，但是这个终端安装后系统就变得极不稳定，经常是文件系统ext4响应超时，然后磁盘直接挂载为read-only模式，然后整个桌面系统崩掉，查看系统
阅读全文
摘要：主要参考内容： https://www.zhihu.com/question/19863631 在vim中剪贴中的内容是难以在vim之外使用的，那么怎么修改这个问题呢？ 首先判断你的vim是否支持系统剪贴板： shell命令： vim --version | grep clipboard 如果如上图
阅读全文
摘要：虽然使用Linux好多年了，使用vim也好多年了，但是使用vim进行search的时候重来也没有想过要添加动态效果，近来突然有了兴致想要添加这个功能，不过发现居然不好用，在百度上找了好长时间居然没有一个关于incsearch不好用、无效果的文章，不过百度上也不是啥也没有找到，一个其他内容的帖子写了这
阅读全文
摘要：近几年关于联想的负面新闻层出不穷，在5G投票上否定华为，产品在国内外定价上不公平对待国人，屡屡爆出涉嫌和中国科学院共同造成大量国有资产的流失，在乌俄争端中宣布自裁俄罗斯，等等。 这些事情的发生可以说联想集团已经大大的伤害了国人的感情，这样的企业对得上中国企业这个称号吗，我想它是配不上的。 联想集团虽
阅读全文
摘要：自己感觉还不错的教程，容易入门也比较全面，自己看的就是这个教程： Tmux 使用教程： http://www.ruanyifeng.com/blog/2019/10/tmux.html 比较常用的快捷键操作： 必须承认这个默认的快捷键确实不是很好用，但是改这些快捷键则意味着你要额外的保存出一个配置文
阅读全文
摘要：linux环境下终端的文件管理器ranger的安装： github下载地址： https://github.com/ranger/ranger 安装： pip install ranger-fm 启动ranger: 配置初始化： ranger --copy-config=all 安装代码高亮组件：
阅读全文
摘要：朋友急找我说校长给他们学院下要求要更新研究生的培养方案，然后这个工作正常是到了院长和主任手中，而现在院领导都有事情要忙没时间做这个，这个工作就到了朋友手中，朋友也是一脸懵就把这事情推给了我，我这也是摸着石头过河，毕竟是研究生培养方案还是蛮有意义的一件事，不过真干起来发现这事情根本没的搞，因为本身学院
阅读全文
摘要：Ubuntu18.04桌面系统，安装动态更换桌面壁纸的应用，即安装软件 variety。 variety 的安装： sudo apt install variety 安装好以后就会自动启动。 我们可以手动对这个桌面壁纸应用variety进行配置： 需要注意的是这个variety桌面壁纸软件可以设置时
阅读全文
浙公网安备 33010602011771号