随笔分类 -  编程实践

C,C++,C#,VB,JAVA
摘要:2016年Google DeepMind提出了Dueling Network Architectures for Deep Reinforcement Learning,采用优势函数advantage function,使Dueling DQN在只收集一个离散动作的数据后,能够更加准确的去估算Q值,选择更加合适的动作。Double DQN,通过目标Q值选择的动作来选择目标Q值,从而消除Q值过高估计的问题。D3QN(Dueling Double DQN)则是结合了Dueling DQN和Double DQN的优点。 阅读全文
posted @ 2022-08-23 18:52 xerwin 阅读(646) 评论(0) 推荐(0) 编辑
摘要:最近AlphaGo Zero的发布,深度学习又火了一把,小伙伴们按捺不住内心的躁动,要搞一个游戏AI,好吧,那就从规则简单、老少皆宜的五子棋开始讲起。要做AI,得先有场景,上一篇我们实现了一个五子棋的逻辑,讲道理,有个规则在,可以开始搞AI了,但是考虑到不够直观,并且也要简单测一下上一篇的逻辑实现得有没有问题,我们还是顺带先把五子棋的UI也先搞出来。本文使用PyGame来实现UI部分。 阅读全文
posted @ 2017-11-14 22:43 xerwin 阅读(20692) 评论(16) 推荐(10) 编辑
摘要:最近AlphaGo Zero的发布,深度学习又火了一把,小伙伴们按捺不住内心的躁动,要搞一个游戏AI,好吧,那就从规则简单、老少皆宜的五子棋开始讲起。要做AI,得先有场景,所以本文先实现一个五子棋的逻辑。 阅读全文
posted @ 2017-11-13 23:41 xerwin 阅读(14918) 评论(15) 推荐(19) 编辑
摘要:Introduction Most likely you have used a relational database and been fairly happy with it. I know I have. Be it SQL Server or MySQL, I know how to use my tools efficiently to push, pull, and transfor... 阅读全文
posted @ 2010-12-15 18:02 xerwin 阅读(3965) 评论(0) 推荐(0) 编辑
摘要:C++数据类型与C#对应关系 阅读全文
posted @ 2010-04-07 10:23 xerwin 阅读(1332) 评论(0) 推荐(0) 编辑
摘要:As structs are aggregates of any other data type you care to invent, learning how to work with them is important, and provides an excellent grounding in tackling wider problems. 阅读全文
posted @ 2010-04-07 10:19 xerwin 阅读(871) 评论(2) 推荐(1) 编辑
摘要:从SQL 2008 复制数据及对像到SQL 2000 的方法 阅读全文
posted @ 2009-07-21 17:22 xerwin 阅读(1289) 评论(0) 推荐(0) 编辑
摘要:SQL 2008到2005和2000版本的转换 阅读全文
posted @ 2009-07-21 16:46 xerwin 阅读(1300) 评论(0) 推荐(0) 编辑
摘要:Windows Message Codes 阅读全文
posted @ 2009-06-20 22:56 xerwin 阅读(317) 评论(0) 推荐(0) 编辑
摘要: C语言版本 的 yxyDES2 阅读全文
posted @ 2009-04-23 23:19 xerwin 阅读(7313) 评论(18) 推荐(2) 编辑
摘要:本文简要介绍一下DES,SHA1,RSA算法,并给出了.NET中提供的标准函数的C#示例,果想做一个网络安全模块,只需将三种算法结合起来设计一个模型,我相信可以实现很多复杂的功能。 阅读全文
posted @ 2009-04-14 12:32 xerwin 阅读(18590) 评论(24) 推荐(7) 编辑
摘要:本文包括: 一.DES 2.1 说明 ,二. DES 2.1的简介,三.DES 算法介绍,四. yxyDES2 Class提供的Public函数,五. 加密、解密示例,六.关于一些特殊情况的特别说明:yxyDES2提供一些转换函数,七.关于文件加密,八.示例代码下载 阅读全文
posted @ 2009-04-14 00:54 xerwin 阅读(41940) 评论(149) 推荐(17) 编辑
摘要:DES 加密解密程序2.0版,不管从性能上还是代码的优化上都比1.0版有比较大的提升,支持任意长度字符串加密解密,支持3DES,支持换行等特殊字符。 阅读全文
posted @ 2009-03-27 01:51 xerwin 阅读(4344) 评论(61) 推荐(0) 编辑
摘要:蚁群算法(Ant Colony Algorithm)是一种源于自然现象的算法,也是一种 meta heuristic,即与具体问题关系不大的优化算法,也就是它是一种用来在图中寻找优化路径的机率型技术。Marco Dorigo于1992年在他的博士论文中引入,其灵感来源于蚂蚁在寻找食物过程中发现路径的行为。 阅读全文
posted @ 2009-03-19 16:26 xerwin 阅读(2443) 评论(0) 推荐(1) 编辑
摘要:蚁群算法(ant colony optimization,ACO),又称蚂蚁算法,是一种用来在图中寻找优化路径的机率型技术。它由Marco Dorigo于1992年在他的博士论文中引入,其灵感来源于蚂蚁在寻找食物过程中发现路径的行为。蚁群算法是一种模拟进化算法。初步的研究表明该算法具有许多优良的性质。针对PID控制器参数优化设计问题,将蚁群算法设计的结果与遗传算法设计的结果进行了比较,数值仿真结果表明,蚁群算法具有一种新的模拟进化优化方法的有效性和应用价值。蚁群算法是一种求解组合最优化问题的新型通用启发式方法,该方法具有正反馈、分布式计算和富于建设性的贪婪启发式搜索的特点。正因为蚁群算法有这些优点,很多研究者都在致力研究和改过它,本文的目的正是为了介绍蚁群算法,学习如何编写蚁群算法。 阅读全文
posted @ 2009-03-19 16:16 xerwin 阅读(1048) 评论(0) 推荐(0) 编辑
摘要: 如果你想创建一个只包含一个源程序文件的简单程序,那么你只需要编译、连接那一个文件就可以了。如果是一个团队项目组,有着许多甚至上千个源程序文件,那么要创建一个可执行程序的过程就变得更复杂、更耗时。你必须用各种各样的组件将程序逐步建立起来。 在微软或其它一些软件公司中惯例是:每日构造并做“冒烟测试”。每天都对已完成的源程序进行编译,然后连接组合成可执行的程序,并做“冒烟测试”,以简单的检查该执行程序在运行时是否会“冒烟”。 阅读全文
posted @ 2008-07-02 18:55 xerwin 阅读(589) 评论(2) 推荐(0) 编辑
摘要:今晚帮一个朋友做点东西,需要得到Access数据库中的所有表名,经过一番研究后终于搞定这个函数,感觉还是有点意思,特将其做个笔记保存下来。 阅读全文
posted @ 2008-05-11 00:51 xerwin 阅读(4294) 评论(4) 推荐(0) 编辑
摘要:在C#中做很多应用需要使用win32 API,但发现原型函数的一些数据类型看起来非常费劲,甚至在C#中“没有”这种数据类型,查阅了一下资料,数据类型对应关系整理如下,希望对大家有用。 阅读全文
posted @ 2007-08-20 22:13 xerwin 阅读(901) 评论(7) 推荐(0) 编辑
摘要:The Terminal Services API enables you to enumerate and manage Terminal Servers, client sessions, and processes. To retrieve the names of all the Terminal Servers in a domain, call the NetServerEnum function to enumerate servers of the SV_TYPE_TERMINALSERVER type. To open a handle to a specific Terminal Server, pass the server name in a call to the WTSOpenServer function. Call the WTSCloseServer function to close the handle when you are finished with it. 阅读全文
posted @ 2007-07-08 00:41 xerwin 阅读(1228) 评论(3) 推荐(0) 编辑
摘要:昨晚做一个小的3D的东西,需要用到DirectX中的几个DLL,由于不想安装DX的SDK,本人找了好久,最后终于在一个完整的50多M的DX安装包中把这几百k的DLL找出来了,为了方便大家(或者说我下次就不用找了,呵呵),今天把这9个DLL连同XML打包放博客上,给需要的朋友. 阅读全文
posted @ 2007-06-28 13:18 xerwin 阅读(947) 评论(11) 推荐(0) 编辑