Hadoop集群搭建 - 随笔分类 - McHades

修改现有磁盘挂载

摘要：[toc] 修改现有磁盘挂载在用虚拟机搭建完cm集群后，因为之前在创建虚拟机的时候只分配了20G的硬盘空间，所以出现了日志空间不足的告警。解决这个问题，需要添加新的硬盘并重新挂载到目录上，但是原目录中的文件夹有特定的所有者和权限属性设定，直接删除原目录会导致节点直接挂掉。参考了 "该篇博客" 的挂阅读全文

posted @ 2018-09-06 16:10 McHades 阅读(1071) 评论(2) 推荐(0)

4.Hadoop集群搭建之启动

摘要：配置好Hadoop、HDFS、YARN、Zookeeper集群后，需要按照顺序启动。前期准备配置好Hadoop、HDFS、YARN、Zookeeper集群先stop掉所有的hadoop服务使用命令查看进程，确保只有进程存在，没有其他的Hadoop服务进程。若存在Hadoop服务进程，使用阅读全文

posted @ 2018-05-22 22:06 McHades 阅读(467) 评论(0) 推荐(0)

3.Hadoop集群搭建之Zookeeper安装

摘要：前期准备下载Zookeeper 3.4.5 若无特殊说明，则以下操作均在master节点上进行 1. 解压Zookeeper 直接解压Zookeeper压缩包 tar zxvf zookeeper 3.4.5.tar.gz C /hadoop/app 2. 修改Zookeeper中conf下的配置阅读全文

posted @ 2018-05-22 21:56 McHades 阅读(397) 评论(0) 推荐(0)

2.Hadoop集群搭建之Hadoop（包含HDFS和Yarn）安装

摘要：前期准备下载JDK 6.0以上版本下载Hadoop 2.4.1 1. 安装JDK 因为Hadoop是Java开发的，所以需要安装JDK，建议JDK 6.0以上。解压JDK 配置环境变量 2. 安装Hadoop 解压Hadoop安装包同JDK解压方式修改六个配置文件注：hadoop2.x的阅读全文

posted @ 2018-05-22 21:48 McHades 阅读(317) 评论(0) 推荐(0)

1.Hadoop集群搭建之Linux主机环境准备

posted @ 2018-05-22 21:47 McHades 阅读(199) 评论(0) 推荐(0)

随笔分类 - Hadoop集群搭建

公告