摘要:
上个博客写了Hadoop2.6.0的环境部署,下面写一个简单的基于数字排序的小程序,真正实现分布式的计算,原理就是对多个文件中的数字进行排序,每个文件中每个数字占一行,排序原理是按行读取后分块进行排序,最后对块进行合并,通俗来说就是首先对小于100的数据范围进行排序,然后对100-1000之间的数据 阅读全文
posted @ 2016-01-25 18:27
小得盈满
阅读(602)
评论(0)
推荐(0)
摘要:
Hadoop的集群部署和单节点部署类似,配置文件不同,另外需要修改网络方面的配置 首先,准备3台虚拟机,系统为CentOS 6.6,其中一台为namenode 剩余两台为 datanode; 修改主机名主节点为:hadoopha,数据节点主机名分别为hadoop1、hadoop2,具体修改方法点击这 阅读全文
posted @ 2016-01-25 16:23
小得盈满
阅读(1254)
评论(0)
推荐(0)
摘要:
红帽系列的Linux发行版主机名存放位置是/etc/sysconfig/network,Ubuntu Linux主机名存放位置是/etc/hostname,所以只要修改主机名存放文件便可以永久的修改计算机名 以CentOS为例,可以使用hostname命令查看当前的主机名,通过vim /etc... 阅读全文
posted @ 2016-01-25 15:02
小得盈满
阅读(3750)
评论(0)
推荐(0)

浙公网安备 33010602011771号