Angry_Panda - 博客园

baselines中环境包装器EpisodicLifeEnv的分析

摘要：如题： class EpisodicLifeEnv(gym.Wrapper): def __init__(self, env): """Make end-of-life == end-of-episode, but only reset on true game over. Done by Deep 阅读全文

posted @ 2022-04-10 12:16 Angry_Panda 阅读(183) 评论(0) 推荐(0)

baselines库中cmd_util.py模块对atari游戏的包装为什么要分成两部分并在中间加入flatten操作呢？

摘要：如题： cmd_util.py模块中对应的代码：可以看到不论是atari游戏还是retro游戏，在进行游戏环境包装的时候都是分成两部分的，如atari游戏，第一部分是make_atari，第二部分是wrap_deepmind，在两者之间有一个FlattenObservation操作。通过Flat 阅读全文

posted @ 2022-04-10 11:25 Angry_Panda 阅读(132) 评论(0) 推荐(0)

从baselines库的common/vec_env/vec_normalize.py看reinforcement learning算法中的reward shape方法

摘要：参考前文：https://www.cnblogs.com/devilmaycry812839668/p/15889282.html 2. REINFORCE算法实际代码中为什么会对一个episode内的所有状态动作对的折扣奖励和进行规则化（Regularize）总所周知在REINFORCE算法的论阅读全文

posted @ 2022-04-08 23:31 Angry_Panda 阅读(148) 评论(0) 推荐(0)

从baselines库的common/vec_env/vec_normalize.py模块看方差的近似计算方法

摘要：在baselines库的common/vec_env/vec_normalize.py中计算方差的调用方法为： RunningMeanStd 同时该计算函数的解释也一并给出了： https://en.wikipedia.org/wiki/Algorithms_for_calculating_vari 阅读全文

posted @ 2022-04-07 18:09 Angry_Panda 阅读(192) 评论(0) 推荐(0)

根据baselines库修改的运行输入参数的解析代码

摘要：如题： def arg_parser(): """ Create an empty argparse.ArgumentParser. """ import argparse parser = argparse.ArgumentParser(formatter_class=argparse.Argum 阅读全文

posted @ 2022-04-03 16:00 Angry_Panda 阅读(58) 评论(0) 推荐(0)

精确制导武器和非精确制导武器之间是否应该有次精确制导武器的存在？

摘要：看俄罗斯和乌克兰这次的局部战情况，不难看出俄罗斯在精确制导武器上的匮乏，不过我们也可以看到俄罗斯到导弹技术上也确实有自己独到的建树，那个超音速的匕首导弹毕竟是“攻无不克、战无不胜”的level，但是即使这样也掩盖不在俄罗斯由于工业基础的发展停滞和经济窘迫所造成的整体的精确制导武器的存量不足问题，说怕阅读全文

posted @ 2022-04-02 10:16 Angry_Panda 阅读(364) 评论(0) 推荐(0)

Tensorflow1.14中placeholder.shape和tf.shape(placeholder)的区别

摘要：最近在看TensorFlow的代码，还是1.14版本的TensorFlow的，代码难度确实比pytorch的难上不是多少倍，pytorch的代码看一遍基本能看懂个差不多，TensorFlow的代码看一遍没懂，再看一遍还没懂，再看一遍呢，还没懂，不过这时候基本也就快崩溃了。记录一个刚学到的Tenso 阅读全文

posted @ 2022-04-01 11:12 Angry_Panda 阅读(246) 评论(0) 推荐(0)

呼叫81192，请返航……

摘要：时隔21年，让我们再次呼叫81192，请返航…… 只有国家的强大才能保证人民群众的安全，在我们安居乐业的同时不要忘记那些保卫边疆国门的人，没有他们的默默付出就没有我们今天的平安生活，要我们缅怀英雄，谨记历史。缅怀英烈的同时我们还要清楚的知道这样一个事情，那就是落后就要挨打，这是不要的道理，曾经的我阅读全文

posted @ 2022-04-01 09:34 Angry_Panda 阅读(72) 评论(0) 推荐(0)

baselines算法库baselines/common/input.py模块分析

摘要： baselines算法库baselines/common/input.py模块代码： import numpy as np import tensorflow as tf from gym.spaces import Discrete, Box, MultiDiscrete def observat 阅读全文

posted @ 2022-03-31 10:12 Angry_Panda 阅读(218) 评论(0) 推荐(0)

【转载】 xavier，kaiming初始化中的fan_in,fan_out在卷积神经网络是什么意思

摘要：原文地址： https://www.cnblogs.com/liuzhan709/p/10092679.html xavier初始化出自论文Understanding the difficulty of training deep feedforward neural network, 论文讨论的是阅读全文

posted @ 2022-03-29 23:19 Angry_Panda 阅读(471) 评论(1) 推荐(0)

Angry Panda（T-800）

公告

导航