摘要:一、前言 今天是六一,先祝大家六一快乐!距上次发文章已经过了快一个月,工作有点忙,所以有点拖更,见谅~ 我们这次来研究一下Crawler(爬虫)示例。官方其实还有个示例——Reacher,但是这个示例比较简单,就是模拟一个带两个关节的手臂去跟随目标物体,其核心就是让我们学会如何利用Configura 阅读全文
posted @ 2020-06-01 19:07 煦阳 阅读(20) 评论(0) 推荐(0) 编辑
摘要:[TOC] ML Agents(九)Wall Jump 一、前言 这次我们来看一下 Wall Jump 示例,这个例子又和我们之前学习的示例不同,它引用了 Curriculum Learning (课程学习)的学习方法,简单来讲就是使用授课学习的方式来训练神经网络,学习的样本从易到难,模拟人类学系 阅读全文
posted @ 2020-05-06 21:19 煦阳 阅读(73) 评论(2) 推荐(0) 编辑
摘要:[TOC] ML Agents(八)PushBlock 一、前言 我们这次来学习一个新的实例——Push Block。这个示例的效果如下: 如图可以看到,这个示例训练的效果就是让agent把白色的方块推到场景中绿色条形区域就算完成任务。注意每完成一次任务,重置的时候地面会显示绿色,表明此次agen 阅读全文
posted @ 2020-04-27 20:58 煦阳 阅读(103) 评论(0) 推荐(0) 编辑
摘要:[TOC] ML Agents(七)训练指令与训练配置文件 一、背景 到现在为止,官方的示例已经研究三个了,但是说实话自己去按官方的配置文件训练,有时候并不能完全训练出好的模型,而且官方的配置文件配置项都不是很明白,因此想在看下一个示例之前,先来研究一下官方关于配置文件的文档,通俗点就是翻译一下,有 阅读全文
posted @ 2020-04-17 23:01 煦阳 阅读(220) 评论(0) 推荐(0) 编辑
摘要:[TOC] Unity Editor扩展编辑器中显示脚本属性 背景 近期需要完成一个扩展编辑器中的功能,即在Scene视图中任意选择某GameObject,然后给这个GameObject动态添加指定脚本,难点是需要让脚本的属性也同时暴露出来,让我们可以随时修改其中公共属性,并序列化下来。 实现效果 阅读全文
posted @ 2020-04-12 17:10 煦阳 阅读(120) 评论(0) 推荐(0) 编辑
摘要:[TOC] ML Agents(六)Tennis 喜欢的童靴希望大家多多点赞收藏哦~ 这次Tennis示例研究费了我不少劲,倒不是因为示例的难度有多大,而重点是这个示例的训练过程中遇到了许多问题值得记录下来,其次这个训练是一个 对抗训练 ,也是比较有意思的示例。 一、Tennis介绍 首先来看看效 阅读全文
posted @ 2020-04-11 17:11 煦阳 阅读(232) 评论(2) 推荐(1) 编辑
摘要:[TOC] 数据结构(二)—栈 一、栈的概念及特点 概念 栈 (stack)是限定仅在表尾进行插入或删除操作的线性表,其表尾端称为 栈顶 (top),表头端称为 栈底 (bottom),不含元素的空表称为空栈。 特点 后进先出(LIFO,Last In First Out) 基本操作 初始化 入栈 阅读全文
posted @ 2020-04-06 21:21 煦阳 阅读(32) 评论(0) 推荐(0) 编辑
摘要:[TOC] ML Agents(五)GridWorld GridWorld这个例子比较有意思,它还是运用了Reinforcement Learning来进行学习的,不同的是它运用了视觉观察值(Visual Observations)来训练agent。 如上图所示,Agent就是蓝色的方块,每次它可 阅读全文
posted @ 2020-04-05 21:22 煦阳 阅读(187) 评论(2) 推荐(0) 编辑
摘要:[TOC]  ML Agents(四)3DBall补充の引入泛化 前两天大概研究完3DBall示例,里面的初始化中运用了如下代码: 这里面的 m_ResetParams 参数初始化让我没明白到底是干啥用的,今天翻官方文档才发现这里参数的意义,简单来讲其实这里是为了训练出可以适应环境改变的Agent 阅读全文
posted @ 2020-03-31 00:05 煦阳 阅读(120) 评论(0) 推荐(0) 编辑
摘要:[TOC]  ML Agents(三)3DBall例子 前一周忙着公司的考试,都没有怎么学新的,今天补上~ 之后的记录,我准备先只研究官方的示例,主要是把研究过程中的疑惑和想法记下来。首先我先补充一下如何利用GPU进行训练,结合(一)中的安装方法,需要CUDA v10.0,cuDNN v7.6.5 阅读全文
posted @ 2020-03-29 00:51 煦阳 阅读(224) 评论(0) 推荐(1) 编辑