摘要:
#!/bin/bash CPU=`top -b -n 1|grep Cpu|awk '{print $2}'|cut -f 1 -d "."`LOAD=`top -b -n 1|grep load|awk '{print $12}'|cut -f 1 -d "."`JAVA=`top -b -n 1
阅读全文
posted @ 2016-08-25 11:15
何石-博客
阅读(3515)
推荐(0)
摘要:
1、jar包下载地址: http://cn.jarfire.org/ 2、google查询地址 https://www.laiguge.com/
阅读全文
posted @ 2016-08-23 13:30
何石-博客
阅读(186)
推荐(0)
摘要:
本教程讲述如何配置 Hadoop 集群,默认读者已经掌握了 Hadoop 的单机伪分布式配置,否则请先查看Hadoop安装教程_单机/伪分布式配置 或 CentOS安装Hadoop_单机/伪分布式配置。 本教程适合于原生 Hadoop 2,包括 Hadoop 2.6.0, Hadoop 2.7.1
阅读全文
posted @ 2016-08-23 09:45
何石-博客
阅读(1776)
推荐(0)
摘要:
当开始着手实践 Hadoop 时,安装 Hadoop 往往会成为新手的一道门槛。尽管安装其实很简单,书上有写到,官方网站也有 Hadoop 安装配置教程,但由于对 Linux 环境不熟悉,书上跟官网上简略的安装步骤新手往往 Hold 不住。加上网上不少教程也甚是坑,导致新手折腾老几天愣是没装好,很是
阅读全文
posted @ 2016-08-22 19:55
何石-博客
阅读(6488)
推荐(0)
摘要:
MapReduce运行流程 MapReduce容错机制
阅读全文
posted @ 2016-08-20 14:35
何石-博客
阅读(316)
推荐(0)
posted @ 2016-08-20 14:23
何石-博客
阅读(401)
推荐(0)
摘要:
1、HDFS文件读取流程: 2、HDFS写入文件流程
阅读全文
posted @ 2016-08-20 14:16
何石-博客
阅读(326)
推荐(0)
摘要:
上图中的ABCDE都代表默认大小64M的数据块 nameNode与dataNode之间有一个心跳机制,datanode每隔多秒钟定期的发送心跳到nameNode
阅读全文
posted @ 2016-08-20 14:09
何石-博客
阅读(257)
推荐(0)
摘要:
1、组成部分HDFS和MapReduce 2、HDFS这几架构
阅读全文
posted @ 2016-08-20 13:41
何石-博客
阅读(252)
推荐(0)
摘要:
第一步:进入conf文件夹下,红框中的4个文件是需要修改的问价 第二步:修改hadoop.env.sh 修改javaHome为真实路径,并删除前面的#号 第三步:修改core-site.xml 在<configuration> </configuration> 中添加相应配置值 第四步:修改hdfs
阅读全文
posted @ 2016-08-20 13:22
何石-博客
阅读(210)
推荐(0)