Shiyu_Huang - 博客园

2017年8月13日

摘要： 1.Delayed, sparse reward(feedback), Long-term planning Hierarchical Deep Reinforcement Learning, Sub-goal, SAMDP, optoins, Thompson sampling, Boltzman 阅读全文

posted @ 2017-08-13 15:47 Shiyu_Huang 阅读(259) 评论(0) 推荐(0)

Graying the black box: Understanding DQNs

摘要： Zahavy, Tom, Nir Ben-Zrihem, and Shie Mannor. "Graying the black box: Understanding DQNs." International Conference on Machine Learning. 2016. 这篇论文想要做阅读全文

posted @ 2017-08-13 14:56 Shiyu_Huang 阅读(379) 评论(0) 推荐(0)

2017年8月11日

Deep Reinforcement Learning from Self-Play in Imperfect-Information Games

摘要： Heinrich, Johannes, and David Silver. "Deep reinforcement learning from self-play in imperfect-information games." arXiv preprint arXiv:1603.01121(201 阅读全文

posted @ 2017-08-11 21:08 Shiyu_Huang 阅读(784) 评论(0) 推荐(0)

Good Sentences for RL

该文被密码保护。阅读全文

posted @ 2017-08-11 20:07 Shiyu_Huang 阅读(5) 评论(0) 推荐(0)

2017年8月10日

Asynchronous Methods for Deep Reinforcement Learning(A3C)

摘要： Mnih, Volodymyr, et al. "Asynchronous methods for deep reinforcement learning." International Conference on Machine Learning. 2016. DeepMind rl系列文章之一。阅读全文

posted @ 2017-08-10 17:36 Shiyu_Huang 阅读(591) 评论(0) 推荐(0)

2017年8月4日

Docker之删除container和image

摘要：删除所有停止的container: docker rm $(docker ps -a -q) 删除所有未标记的image 删除所有image 阅读全文

posted @ 2017-08-04 15:24 Shiyu_Huang 阅读(1338) 评论(0) 推荐(0)

Ubuntu之Docker安装

摘要： docker自动安装： https://www.runoob.com/docker/ubuntu-docker-install.html 官方安装教程：https://docs.docker.com/engine/install/ubuntu/ docker手动安装： 0. 安装依赖 apt-get 阅读全文

posted @ 2017-08-04 09:51 Shiyu_Huang 阅读(352) 评论(0) 推荐(0)

2017年8月1日

Tensorflow参数初始化很慢的问题

摘要：首先查看是否使用了import cv2 如果有import cv2，说明是opencv的问题因为如果你的opencv是本地编译的，那么很可能使用了cudnn进行编译，那么这个cv2就会占用显存，并且和tensorflow冲突。解决办法：重新编译opencv: http://www.cnblogs 阅读全文

posted @ 2017-08-01 14:43 Shiyu_Huang 阅读(1956) 评论(0) 推荐(0)

2017年7月17日

Linux之打包和解压缩

摘要： zip格式： 1.压缩对于test目录，使用 zip -rq test.zip test r表示递归压缩，q表示不显示过程 2.解压缩: unzip -q test.zip tar格式： 1.压缩： tar -cvf test.tar test 2.解压缩: tar -xvf test.tar t 阅读全文

posted @ 2017-07-17 16:53 Shiyu_Huang 阅读(2238) 评论(0) 推荐(0)

2017年7月14日

Omnigraffle快捷键

摘要： cmd+shift+. 和 cmd+shift+, 放大缩小按住z点击鼠标是放大, z+Option是缩小按住command双指推移缩放按住command，旋转物体按住 option缩放基于中心缩放按住t 新建文字 cmd+1234 切换面板 cmd+r 显示标尺 cmd+d 复制一个阅读全文

posted @ 2017-07-14 12:57 Shiyu_Huang 阅读(1819) 评论(0) 推荐(0)

2017年7月10日

ubuntu之Matlab安装

摘要：（清华大学校内适用） 1.首先下载Matlab镜像:http://its.tsinghua.edu.cn/column/jsrj/1，一共有两个ios文件。 2.然后执行 cd ~ mkdir matlab sudo mount -t auto -o loop R2017a_glnxa64_dvd1 阅读全文

posted @ 2017-07-10 14:33 Shiyu_Huang 阅读(790) 评论(0) 推荐(0)

2017年7月8日

ubuntu窗口打开指定文件夹

摘要： nautilus /home/hsy 阅读全文

posted @ 2017-07-08 12:40 Shiyu_Huang 阅读(1015) 评论(0) 推荐(0)

2017年7月7日

ViZDoom安装

摘要：官网：https://github.com/mwydmuch/ViZDoom/blob/master/doc/Building.md 环境：ubuntu16, python2.7, Anaconda2 1.首先安装依赖 # ZDoom dependencies sudo apt-get instal 阅读全文

posted @ 2017-07-07 23:06 Shiyu_Huang 阅读(2422) 评论(1) 推荐(0)

2017年6月29日

apt-get强制使用Ipv4

摘要： sudo apt-get -o Acquire::ForceIPv4=true update 永久解决办法：创建文件 /etc/apt/apt.conf.d/99force-ipv4 加入代码: Acquire::ForceIPv4 "true"; 阅读全文

posted @ 2017-06-29 09:16 Shiyu_Huang 阅读(1716) 评论(0) 推荐(0)

2017年6月28日

Python版本,pip版本手动管理

摘要： http://blog.csdn.net/jiandanjinxin/article/details/53175121 阅读全文

posted @ 2017-06-28 17:06 Shiyu_Huang 阅读(231) 评论(0) 推荐(0)

2017年6月26日

PyCharm快捷键

摘要： ubuntu环境: Ctrl Alt 斜杠代码整理 Ctrl D 复制当前行 Ctrl Y 删除当前行 Shift + Enter 新建一行 Ctrl+Win+加号展开函数 Ctrl+Win+减号折叠函数 Ctrl+Shift+Win+加号展开所有函数 Ctrl+Shift+Win+减号折阅读全文

posted @ 2017-06-26 17:36 Shiyu_Huang 阅读(515) 评论(0) 推荐(0)

2017年6月22日

Learning to act by predicting the future

摘要： Dosovitskiy, Alexey, and Vladlen Koltun. "Learning to act by predicting the future." arXiv preprint arXiv:1611.01779 (2016). vizdoom比赛track2的冠军。要点： 1 阅读全文

posted @ 2017-06-22 11:01 Shiyu_Huang 阅读(483) 评论(0) 推荐(0)

2017年6月20日

Python之批量改变图片大小

摘要： image_pylib模块：https://github.com/huangshiyu13/image_pylib data_engine模块:https://github.com/huangshiyu13/RPNplus/blob/master/data_engine.py _init_paths 阅读全文

posted @ 2017-06-20 10:58 Shiyu_Huang 阅读(1067) 评论(0) 推荐(0)

2017年6月19日

VC dimension（Vapnik-Chervonenkis dimension）

摘要：二维平面的线性分类器的VC维讨论：http://www.tuicool.com/articles/JjaMfe VC维介绍：http://blog.csdn.net/lucylove3943/article/details/47280991 定义：对一个指示函数集,如果存在h个样本能够被函数集中的函阅读全文

posted @ 2017-06-19 10:47 Shiyu_Huang 阅读(571) 评论(0) 推荐(0)

2017年6月18日

中国餐馆过程(Chinese restaurant process)

摘要：也就是说假设空桌子有a0个人，然后顾客选择桌子的概率和桌子上人数成正比。性质：改变用户的排列方式，桌子的排列方式，概率不变换。阅读全文

posted @ 2017-06-18 22:33 Shiyu_Huang 阅读(2715) 评论(0) 推荐(0)

最大割(Maximum cut)

摘要：问题描述：把图中点分为两部分V1和V2，使得V1和V2之间的连边值最大。阅读全文

posted @ 2017-06-18 14:19 Shiyu_Huang 阅读(1810) 评论(0) 推荐(1)

最小顶点覆盖(Minimum Vertex Cover)与最大独立集(Maximum Independent Set)

摘要：问题描述：就是在图中找最小的点集，使得覆盖所有边。和独立集等价：独立集问题：在图中找最大的点集，使得点集内的所有点互不相连。引理：顶点覆盖集和独立集互补。上面这个引理使得这两个问题可以相互规约，从而这两个问题等价。等价问题：给定图G和数k, 问G包含大小至少为k的独立集吗？为什么等价：如果阅读全文

posted @ 2017-06-18 13:54 Shiyu_Huang 阅读(3182) 评论(1) 推荐(0)

2017年6月17日

Anaconda之常用命令

摘要： conda下载，添加镜像源等参考：https://mirror.tuna.tsinghua.edu.cn/help/anaconda/ 1.查看环境列表：conda-env list 2.删除环境：conda env remove -n tf1.2 3.创建指定python的环境：conda cre 阅读全文

posted @ 2017-06-17 14:33 Shiyu_Huang 阅读(352) 评论(0) 推荐(0)

2017年6月14日

DSSM(DEEP STRUCTURED SEMANTIC MODELS)

摘要： Huang, Po-Sen, et al. "Learning deep structured semantic models for web search using clickthrough data." Proceedings of the 22nd ACM international con 阅读全文

posted @ 2017-06-14 16:03 Shiyu_Huang 阅读(1856) 评论(0) 推荐(0)

2017年6月12日

Mastering the game of Go with deep neural networks and tree search浅析

摘要： Silver, David, et al. "Mastering the game of Go with deep neural networks and tree search." Nature 529.7587 (2016): 484-489. 推荐PPT:https://wenku.baidu 阅读全文

posted @ 2017-06-12 19:49 Shiyu_Huang 阅读(1517) 评论(0) 推荐(0)

2017年6月5日

latex之转置符号

摘要： $\mathbf{A}^\mathrm{T}$ $\mathbf{A}^\top$ $\mathbf{A}^\mathsf{T}$ $\mathbf{A}^\intercal$效果分别为：阅读全文

posted @ 2017-06-05 18:14 Shiyu_Huang 阅读(33984) 评论(0) 推荐(2)

t-SNE可视化(MNIST例子)

摘要：如下所示：结果：以MNIST为例，先做PCA降到50维，再做t-sne：结果如下：更多降维的可视化参考：http://scikit-learn.org/stable/auto_examples/manifold/plot_lle_digits.html#sphx-glr-auto-examp 阅读全文

posted @ 2017-06-05 15:38 Shiyu_Huang 阅读(16785) 评论(1) 推荐(0)

numpy得到数组的index

摘要： itemindex = numpy.where(array==item) 阅读全文

posted @ 2017-06-05 14:42 Shiyu_Huang 阅读(4106) 评论(0) 推荐(0)

2017年6月3日

Latex的各种帽子

摘要： \hat{A} \widehat{A} \tilde{A} \widetilde{A} \overline{A} \underline{A} \overbrace{A} \underbrace{A} \overset{a}{b} \underset{a}{b} \overleftarrow{A} \ 阅读全文

posted @ 2017-06-03 11:56 Shiyu_Huang 阅读(29149) 评论(0) 推荐(2)

2017年6月1日

解决App can’t be opened because it is from an unidentified developer

摘要：关闭设置打开终端输入sudo spctl --master-disable 阅读全文

posted @ 2017-06-01 18:27 Shiyu_Huang 阅读(4087) 评论(0) 推荐(0)

Mac之当前目录打开终端

摘要：参考：https://www.cnblogs.com/huangshiyu13/p/14101284.html 阅读全文

posted @ 2017-06-01 18:06 Shiyu_Huang 阅读(474) 评论(0) 推荐(0)

Mac之安装zsh

摘要： 1.安装homebrew 参考：https://brew.idayer.com/guide/m1/ 如果出现：fatal: Could not resolve HEAD to a revision，说明git没有设置好，通过brew --version查看是不是没有设置好git,可以执行以下命令修复阅读全文

posted @ 2017-06-01 17:52 Shiyu_Huang 阅读(275) 评论(0) 推荐(0)

2017年5月31日

毕业论文之降低重复率

摘要： 1.不要抄 2.相似的要改写阅读全文

posted @ 2017-05-31 20:00 Shiyu_Huang 阅读(241) 评论(0) 推荐(0)

Latex之希腊字母表花体字母实数集

摘要：花体字母 \mathcal{x} 实数集字母 \mathbb{R} 转自：http://blog.csdn.net/lanchunhui/article/details/49819445 拉丁字母是26个，希腊（Greek）字母是24个发音即是它们各自的latex形式，大写字母的是其小写late 阅读全文

posted @ 2017-05-31 15:53 Shiyu_Huang 阅读(34696) 评论(1) 推荐(1)

2017年5月30日

latex之插入数学公式

摘要： 1. 2. 3. 阅读全文

posted @ 2017-05-30 08:40 Shiyu_Huang 阅读(601) 评论(0) 推荐(0)

2017年5月29日

Python之两个列表一起打乱

摘要：例子: import random c = list(zip(a, b)) random.shuffle(c) a[:], b[:] = zip(*c) 阅读全文

posted @ 2017-05-29 12:48 Shiyu_Huang 阅读(3547) 评论(0) 推荐(0)

2017年5月26日

Python之时间统计

摘要： 1.秒级 2.微秒级阅读全文