摘要：
很多年前就给前公司的年会做过年会抽奖，基本要求就是年会入场时签到，签到的员工都参与抽奖（也可以设置公司高管过滤，不参与抽奖），奖品是预设好的，到时候就是给所有签到员工编号，然后抽奖过程中不断生成一组随机数，这些随机数对应的编号的员工姓名和照片就显示出来，这是很容易想到的算法。 但是还要一种情况就是互 阅读全文
摘要：
Hive是Hadoop生态中的一个重要组成部分，主要用于数据仓库。前面的文章中我们已经搭建好了Hadoop的群集，下面我们在这个群集上再搭建Hive的群集。 1.安装MySQL 1.1安装MySQL Server 在Ubuntu下面安装MySQL的Server很简单，只需要运行： 系统会把MySQL 阅读全文
摘要：
在前一篇文章中，我们已经搭建好了Hadoop的群集，接下来，我们就是需要基于这个Hadoop群集，搭建Spark的群集。由于前面已经做了大量的工作，所以接下来搭建Spark会简单很多。 首先打开三个虚拟机，现在我们需要安装Scala，因为Spark是基于Scala开发的，所以需要安装Scala。在U 阅读全文
摘要：
前面我搭建的Hadoop都是单机伪分布式的，并不能真正感受到Hadoop的最大特点，分布式存储和分布式计算。所以我打算在虚拟机中同时开启3台机器，实现分布式的Hadoop群集。 1.准备3台Ubuntu Server 1.1复制出3台虚拟机 我们可以用之前编译和安装好Hadoop的虚拟机作为原始版本 阅读全文
摘要：
在之前的文章中介绍了如何直接在Ubuntu中安装Hadoop。但是对于64位的Ubuntu来说，官方给出的Hadoop包是32位的，运行时会得到警告： WARN util.NativeCodeLoader: Unable to load native-hadoop library for your 阅读全文
摘要：
用过MySQL的应该都会注意到，默认情况下，Linux下安装的MySQL是大小写敏感的，也就是说Table1和table1可以同时存在。而Windows下的MySQL却是大小写不敏感的，所有表名和数据库名都会变成小写。 对于怎么启用或者停用MySQL数据库的大小写敏感，这个网上随便都能找到，就是改改 阅读全文
摘要：
最近在研究虚拟化，容器和大数据，所以从Docker入手，下面介绍一下在Windows下怎么玩转Docker。 Docker本身在Windows下有两个软件，一个就是Docker，另一个是Docker Toolbox。这里我选择的是Docker Toolbox，为什么呢？参见官方文档： https:/ 阅读全文
摘要：
关于这个框架的介绍我就不多说，有兴趣的可以参见官方文档：http://www.aspnetboilerplate.com/Pages/Documents 使用ABP+EF+SQL Server是比较推荐的组合，但是既然我们使用的是EF，那么就应该是和数据库分离的，也就意味着我们应该可以采用其他的数据 阅读全文
摘要：
我在很久之前的一篇文章中介绍了数据库模型设计中的基本三范式，今天，我来说一说更高级的BC范式和第四范式。 回顾 我用大白话来回顾一下什么是三范式： 第一范式：每个表应该有唯一标识每一行的主键。 第二范式：在复合主键的情况下，非主键部分不应该依赖于部分主键。 第三范式：非主键之间不应该有依赖关系。 这是我们设计数据库的基本规则，但是只有这三个规则并不能完全解决数据的增删改的异常情况，下面... 阅读全文
摘要：
OData是一个非常灵活的RESTful API，如果要做出强大的查询API，那么OData就强烈推荐了。http://www.odata.org/ OData的特点就是可以根据传入参数动态生成Entity Framework的查询，最终实现动态的SQL的查询。但是在项目有时我们并没有采用Entit 阅读全文
