随笔分类 -  学习笔记

强化学习笔记10：经典游戏示例 classic games
摘要：1、前沿 state of art学习经典游戏的原因规则简单，细思又很深入历史悠久，已经被研究了几百年对IQ测试有意义是现实世界的问题的缩影已经有很多RL案例，战胜了人类，例如2、游戏理论 game theory游戏的最优性对于石头剪刀布来说，最优策略，显然和对手agent策略相关，我们期望找到一种一致的策略策略，对所有对手都有效什么是第i个玩家的最优策略\(\pi\)最佳响应 best resp... 阅读全文
posted @ 2020-09-08 14:58 Tolshao 阅读(810) 评论(0) 推荐(0)
为什么数值仿真里要用RK4（龙格库塔法）
摘要：小跳最近在搭建一个数值仿真环境，由于需要用到python里面的一些库，所以不得不把simulink的模型搬过来，我们都知道在simulink里，仿真的时候设置仿真步长和微分方程求解器是必要的步骤。但是为什么要设置这个小跳却早已忘记了。一年级的时候搬砖搬多了，数分课也没好好上，回头一看，这么简单的东西，当时竟然整的稀里糊涂的。为什么要用RK4先po一张图，直观感受一下仿真的误差。对于给定线性常微分方... 阅读全文
posted @ 2020-07-25 18:00 Tolshao 阅读(5669) 评论(4) 推荐(1)
gym 搭建 RL 环境
摘要：gym调用gym的调用遵从以下的顺序env = gym.make('x')observation = env.reset()for i in range(time_steps):env.render()action = policy(observation)observation, reward, done, info = env.step(action)if done: …… bre... 阅读全文
posted @ 2020-07-20 23:14 Tolshao 阅读(1726) 评论(0) 推荐(0)
Sequence model
摘要：概述：处理样本数不规则的模型recurrent neural network递归神经网络参数共享,前->后样本逐个扫描a激活用一套参数y激活用一套参数参数流x、y个数不一致的RNN序列样本分类问题音乐生成、机器翻译RNN类型总结language model with RNN输出P(sentence),并按照y(i)展开为字符串从训练模型采样在训练过程中，结局梯度爆炸gradient clippin... 阅读全文
posted @ 2020-07-10 17:02 Tolshao 阅读(443) 评论(0) 推荐(0)
MBSE基于模型的系统工程
摘要：根据国际系统工程协会（INCOSE）在 2007 年发布的《SE 愿景 2020》中的定义，MBSE 是建模方法在系统工程中的形式化应用，用以支持在系统全生命周期内开展需求、设计、分析、验证和确认相关的活动。从定义可以看到，MBSE 是基于文档的传统系统工程工作模式的演进，力求以多视角的系统模型做为桥梁，将跨学科/领域的模型关联起来，实现跨学科/领域的模型追溯，从而驱动大型复杂系统生存周期内各阶段... 阅读全文
posted @ 2020-07-08 18:13 Tolshao 阅读(3712) 评论(2) 推荐(1)
深度学习精炼图笔记总结
摘要：本文转自知乎（Sophia）公众号【计算机视觉联盟】笔记图片由 TessFerrandez 整理，这套信息图优美地记录了深度学习课程的知识与亮点。因此它不仅仅适合初学者了解深度学习，还适合机器学习从业者和研究者复习基本概念。这不仅仅是一份课程笔记，同时还是一套信息图与备忘录。从深度学习基础、卷积网络和循环网络三个方面介绍该笔记1. 深度学习基本概念监督学习：所有输入数据都有确定的对应输出数据，在各... 阅读全文
posted @ 2020-07-08 08:46 Tolshao 阅读(463) 评论(0) 推荐(0)
深度学习笔记-Coursera
摘要：人工智能：机器学习AI分类图分类几种网络结构分类NN——回归预测CNN（convolution NN）卷积神经网络——图片RNN (Recurrent Neural Network）递归神经网络——声音、语言处理LSTM长短期记忆网络——激活函数sigmoidReLU——rectified linear unit 修正线性单元概念Cost function 每个样本的误差均值Loss functi... 阅读全文
posted @ 2020-07-06 18:26 Tolshao 阅读(303) 评论(0) 推荐(0)
Matlab setting & snippet
摘要：记录matlab设置、debug、snippets 阅读全文
posted @ 2020-04-07 08:01 Tolshao 阅读(244) 评论(0) 推荐(0)
科学写作
摘要：创新点 Latex markdown SCI论文 1. 事实汇总 Paper Structure Review Process 文章第一印象 2. Introduction 3. Method 4. Result and Discussion（结果和讨论） 5. 图表(Figure and Tabl 阅读全文
posted @ 2020-03-04 22:01 Tolshao 阅读(592) 评论(0) 推荐(0)
高级控制理论-Dr.can
摘要：Dr_can ARC 步骤 阅读全文
posted @ 2020-01-07 07:59 Tolshao 阅读(1336) 评论(0) 推荐(0)
自动控制理论笔记
摘要：经典控制理论 动态系统建模 一阶系统特性 二阶系统特性 SISO system稳定性判据 频率特性 系统矫正 串联矫正 根轨迹 非线性系统 相关词汇 工程数学基础 1. 特征值,特征向量,过渡矩阵$rightarrow$矩阵对角化 2. 线性化 Linearization 3. 卷积与LTI冲激响应 阅读全文
posted @ 2019-12-02 07:08 Tolshao 阅读(1847) 评论(0) 推荐(0)