摘要: 1. zookeeper的节点的类型 总的来说可以分为持久型和短暂型,主要区别如下: 持久:客户端与服务器端断开连接的以后,创建的节点不会被删除; 持久化目录节点:客户端与zookeeper断开连接之后,该节点依旧会存在; 持久化顺序编号目录节点:客户端与zookeeper断开连接之后,该节点依旧会 阅读全文
posted @ 2019-10-27 22:25 Simon-Lau 阅读(353) 评论(0) 推荐(0) 编辑
摘要: FastDFS安装指南 提前准备好的文件资料: 1、FastDFS tracker安装 1.1 FastDFS安装环境 FastDFS是C语言开发,建议在linux上运行,本教程使用Centos7.4作为安装环境。 安装gcc 依赖环境 1.2 libevent 1.2.1 1.2.2 如果没有pe 阅读全文
posted @ 2019-10-27 13:05 Simon-Lau 阅读(236) 评论(0) 推荐(0) 编辑
摘要: 基于CentOS的Dubbo及Zookeeper配置 需要提前准备好的资料: 1.首先配置java环境 步骤: 将jdk的包上传至centos服务器的 目录下,并且解压 配置环境变量,修改 文件内容,文件的末尾添加如下内容: 在终端中输入 指令,验证是否配置成功。 2.配置Tomcat服务器 步骤: 阅读全文
posted @ 2019-10-27 13:04 Simon-Lau 阅读(243) 评论(0) 推荐(0) 编辑
摘要: 0、错误信息: [root@hadoop101 network-scripts]# service network restart 关闭环回接口: [确定] 弹出环回接口: [确定] 弹出界面 eth0: 错误:没有找到合适的设备:没有找到可用于连接 'System eth0' 的设备。 1、查看系 阅读全文
posted @ 2019-10-27 13:02 Simon-Lau 阅读(201) 评论(0) 推荐(0) 编辑
摘要: 1、准备工作 安装Centos7、建议内存2G以上、安装java1.8环境,固定IP地址,本文省略。 2、ElasticSerach单机安装 1) 创建 目录,存放文件ElasticSerach相关的文件 2) 进入到/opt/es目录下,解压ElasticSerach文件, , 由于Elastic 阅读全文
posted @ 2019-10-27 13:01 Simon-Lau 阅读(397) 评论(0) 推荐(0) 编辑
摘要: YARN HA配置 1. YARN HA工作机制 1.1 官方文档:http://hadoop.apache.org/docs/r2.7.2/hadoop yarn/hadoop yarn site/ResourceManagerHA.html 1.2 YARN HA工作机制,如图3 23所示 2. 阅读全文
posted @ 2019-10-27 11:52 Simon-Lau 阅读(1435) 评论(2) 推荐(0) 编辑
摘要: Zookeeper客户端java代码操作 上篇博客记录了shell命令操作zookeeper集群的方式,这次尝试采用java代码来操作。通过查阅API,发现并不困难。 1. 首先获得客户端与服务器的连接 2. 列出根节点下的子节点(非递归) 3. 在一个节点下创建子节点 4. 获取指定节点的内容 5 阅读全文
posted @ 2019-10-26 22:58 Simon-Lau 阅读(631) 评论(0) 推荐(0) 编辑
摘要: HA高可用集群搭建 1.总体集群规划 在hadoop102、hadoop103和hadoop104三个节点上部署Zookeeper。 | hadoop102 | hadoop103 | hadoop104 | | | | | | NameNode | NameNode | | | JournalNo 阅读全文
posted @ 2019-10-26 22:38 Simon-Lau 阅读(242) 评论(0) 推荐(0) 编辑
摘要: 记一次关闭Hadoop时no namenode to stop异常 ​ 在自己的虚拟机环境上跑着hadoop集群,一直正常运行着,不用的时候直接挂起虚拟机,今天需要做些调整,但是发现集群突然无法正常关闭了。遂祭出百度大法~: 大家都知道,关闭集群的命令是 和`stop yarn.sh`,然鹅我执行完 阅读全文
posted @ 2019-10-25 23:49 Simon-Lau 阅读(1855) 评论(1) 推荐(1) 编辑
摘要: ZooKeeper客户端命令行操作 1. 启动服务端 2. 查看状态信息 3. 启动客户端 4. 查看当前znode中所包含的内容 5. 查看当前节点的详细数据 6. 分别创建两个普通节点 7. 获得节点的值 8. 创建临时节点 (1)在客户端可以查看到 (2)退出当前客户端之后再重启客户端 (3) 阅读全文
posted @ 2019-10-25 23:48 Simon-Lau 阅读(183) 评论(0) 推荐(0) 编辑