随笔分类 -  读书

摘要:一. Spark简介 Spark是一个通用的并行计算框架,由UCBerkeley的AMP实验室开发。Spark基于map reduce 算法模式实现的分布式计算,拥有Hadoop MapReduce所具有的优点;但不同于Hadoop MapReduce的是Job中间输出和结果可以保存在内存中,从而不 阅读全文
posted @ 2016-06-13 23:31 会心一击 阅读(15006) 评论(0) 推荐(0)
摘要:一. 简介 参考了网上许多教程,最终把hadoop在ubuntu14.04中安装配置成功。下面就把详细的安装步骤叙述一下。我所使用的环境:两台ubuntu 14.04 64位的台式机,hadoop选择2.7.1版本。(前边主要介绍单机版的配置,集群版是在单机版的基础上,主要是配置文件有所不同,后边会 阅读全文
posted @ 2016-06-11 16:36 会心一击 阅读(33610) 评论(1) 推荐(4)
摘要:一. hpfeeds协议简介 hpfeeds是一个轻量级的验证发布-订阅协议(authenticated publish-subscribe protocol)。 发布-订阅协议:发布/订阅协议定义了一种一对多的依赖关系,让多个订阅者对象同时监听某一个主题对象。这个主题对象在自身状态变化时,会通知所 阅读全文
posted @ 2016-06-07 13:28 会心一击 阅读(2462) 评论(0) 推荐(0)
摘要:一. mongoDB简介 MongoDB安装时不添加任何参数,默认是没有权限验证的,登录的用户可以对数据库任意操作而且可以远程访问数据库,需以 --auth 参数启动。 在刚安装完毕的时候MongoDB都默认有一个 admin数据库 ,此时admin数据库是空的,没有记录权限相关的信息。当 admi 阅读全文
posted @ 2016-05-26 21:33 会心一击 阅读(226) 评论(0) 推荐(0)
摘要:1. K-NN算法简介 K-NN算法 ( K Nearest Neighbor, K近邻算法 ), 是机器学习中的一个经典算法, 比较简单且容易理解. K-NN算法通过计算新数据与训练数据特征值之间的距离, 然后选取 K (K>=1) 个距离最近的邻居进行分类或者回归. 如果K = 1 , 那么新数 阅读全文
posted @ 2016-04-16 15:20 会心一击 阅读(9245) 评论(0) 推荐(0)
摘要:背景知识 为什么要编译Python文件? 通常Python代码是不需要编译就可以运行的,但Python其实也是有编译的过程的,与Java和C#一样Python只能执行字节码,Python只是将编译过程隐藏起来了。将Python文件编译为 .pyc 或 .pyo 文件有两个目的: python的编译过 阅读全文
posted @ 2016-04-06 09:54 会心一击 阅读(23743) 评论(0) 推荐(3)
摘要:UUID: 通用唯一标识符 ( Universally Unique Identifier ), 对于所有的UUID它可以保证在空间和时间上的唯一性. 它是通过MAC地址, 时间戳, 命名空间, 随机数, 伪随机数来保证生成ID的唯一性, 有着固定的大小( 128 bit ). 它的唯一性和一致性特 阅读全文
posted @ 2016-03-20 17:16 会心一击 阅读(38693) 评论(1) 推荐(2)
摘要:conpot是一个ICS(工业控制系统)蜜罐, 旨在收集攻击者针对工业控制系统的攻击方法和动机. 这篇文章主要用来说明conpot的用户定制相关的一些配置. (英文原文详见: https://github.com/mushorg/conpot/blob/master/docs/source/usag 阅读全文
posted @ 2016-03-19 13:26 会心一击 阅读(2234) 评论(0) 推荐(0)