zookeeper伪分布式集群环境搭建

step1、下载

下载地址:http://zookeeper.apache.org/releases.html

将下载的压缩包放到用户家目录下(其他目录也可以)

step2、解压

 

[plain] view plain copy
 
 在CODE上查看代码片派生到我的代码片
  1. $tar –zxvf zookeeper-3.4.6.tar.gz  

重命名

[plain] view plain copy
 
 在CODE上查看代码片派生到我的代码片
  1. $mv zookeeper-3.4.6 zookeeper  

step3、配置

进入zookeeper/conf/目录下,将改目录下的zoo_sample.cfg配置文件拷贝4份,依次为zoo.cfg  zoo1.cfg  zoo2.cfg  zoo3.cf

使用vim编辑zoo1.cfg  zoo2.cfg zoo3.cfg这三个配置文件

[plain] view plain copy
 
 在CODE上查看代码片派生到我的代码片
  1. $ vim zoo1.cfg  

修改内容如下

配置说明

  • tickTime:这个时间是作为 Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是每个 tickTime 时间就会发送一个心跳。
  • initLimit:这个配置项是用来配置 Zookeeper 接受客户端(这里所说的客户端不是用户连接 Zookeeper 服务器的客户端,而是 Zookeeper 服务器集群中连接到 Leader 的 Follower 服务器)初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过 10个心跳的时间(也就是 tickTime)长度后 Zookeeper 服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 10*2000=20 秒
  • syncLimit:这个配置项标识 Leader 与 Follower 之间发送消息,请求和应答时间长度,最长不能超过多少个 tickTime 的时间长度,总的时间长度就是 5*2000=10秒
  • dataDir:顾名思义就是 Zookeeper 保存数据的目录,默认情况下,Zookeeper 将写数据的日志文件也保存在这个目录里。
  • clientPort:这个端口就是客户端连接 Zookeeper 服务器的端口,Zookeeper 会监听这个端口,接受客户端的访问请求。
  • server.A=B:C:D:其中 A 是一个数字,表示这个是第几号服务器;B 是这个服务器的 ip 地址;C 表示的是这个服务器与集群中的 Leader 服务器交换信息的端口;D 表示的是万一集群中的 Leader 服务器挂了,需要一个端口来重新进行选举,选出一个新的 Leader,而这个端口就是用来执行选举时服务器相互通信的端口。如果是伪集群的配置方式,由于 B 都是一样,所以不同的 Zookeeper 实例通信端口号不能一样,所以要给它们分配不同的端口号。
使用vim修改zoo2.cfg的dataDir=/home/jianjian/zookeeper/server2/data,clientPort=2182,修改zoo3.cfg的dataDir=/home/jianjian/zookeeper/server3/data,clientPort=2183。dataDir目录开始不存在,需要手动创建,并在各data文件下创建名为myid的文件,文件内容对应服务器编号
[plain] view plain copy
 
 在CODE上查看代码片派生到我的代码片
  1. [jianjian@localhost zookeeper]$ echo 1 > server1/data/myid  
  2. [jianjian@localhost zookeeper]$ echo 2 > server2/data/myid  
  3. [jianjian@localhost zookeeper]$ echo 3 > server3/data/myid  

step4、启动

进入目录/home/Hadoop/zookeeper/bin目录,执行命令:

 

[plain] view plain copy
 
 在CODE上查看代码片派生到我的代码片
  1. $zkServer.sh start zoo1.cfg  

启动zoo1.cfg配置的服务,同理依次启动zoo2.cfg和zoo3.cfg所配置的服务

 

step5、查看状态

依次查看启动的三台服务,可见第二台服务为leader,第一台和三台为follower(试验好多次都是第二台是leader,只有一次是第三台是leader,醉~)

附:

当zkServer.sh start和zkServer.sh status命令不接配置文件参数是,默认使用conf/zoo.cfg作为参数

这是只启动一台服务的情况,可见Mode为standalone,只有一台服务的集群...

step6、连通测试

测试server2(leader,其他服务同理)是否连通

[plain] view plain copy
 
 在CODE上查看代码片派生到我的代码片
  1. [root@localhost bin]# ./zkCli.sh -server 127.0.0.1:2182  
  2. Connecting to 127.0.0.1:2182  
  3. 2015-08-12 20:55:23,658 [myid:] - INFO  [main:Environment@100] - Client environment:zookeeper.version=3.4.6-1569965, built on 02/20/2014 09:09 GMT  
  4. 2015-08-12 20:55:23,661 [myid:] - INFO  [main:Environment@100] - Client environment:host.name=localhost.localdomain  
  5. 2015-08-12 20:55:23,661 [myid:] - INFO  [main:Environment@100] - Client environment:java.version=1.7.0_79  
  6. 2015-08-12 20:55:23,662 [myid:] - INFO  [main:Environment@100] - Client environment:java.vendor=Oracle Corporation  
  7. 2015-08-12 20:55:23,662 [myid:] - INFO  [main:Environment@100] - Client environment:java.home=/usr/java/jdk1.7.0_79/jre  
  8. 2015-08-12 20:55:23,662 [myid:] - INFO  [main:Environment@100] - Client environment:java.class.path=/home/jianjian/zookeeper/bin/../build/classes:/home/jianjian/zookeeper/bin/../build/lib/*.jar:/home/jianjian/zookeeper/bin/../lib/slf4j-log4j12-1.6.1.jar:/home/jianjian/zookeeper/bin/../lib/slf4j-api-1.6.1.jar:/home/jianjian/zookeeper/bin/../lib/netty-3.7.0.Final.jar:/home/jianjian/zookeeper/bin/../lib/log4j-1.2.16.jar:/home/jianjian/zookeeper/bin/../lib/jline-0.9.94.jar:/home/jianjian/zookeeper/bin/../zookeeper-3.4.6.jar:/home/jianjian/zookeeper/bin/../src/java/lib/*.jar:/home/jianjian/zookeeper/bin/../conf:  
  9. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:java.library.path=/usr/java/packages/lib/i386:/lib:/usr/lib  
  10. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:java.io.tmpdir=/tmp  
  11. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:java.compiler=<NA>  
  12. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:os.name=Linux  
  13. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:os.arch=i386  
  14. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:os.version=2.6.18-194.el5  
  15. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:user.name=root  
  16. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:user.home=/root  
  17. 2015-08-12 20:55:23,664 [myid:] - INFO  [main:Environment@100] - Client environment:user.dir=/home/jianjian/zookeeper/bin  
  18. 2015-08-12 20:55:23,665 [myid:] - INFO  [main:ZooKeeper@438] - Initiating client connection, connectString=127.0.0.1:2182 sessionTimeout=30000 watcher=org.apache.zookeeper.ZooKeeperMain$MyWatcher@154ea79  
  19. 2015-08-12 20:55:23,699 [myid:] - INFO  [main-SendThread(127.0.0.1:2182):ClientCnxn$SendThread@975] - Opening socket connection to server 127.0.0.1/127.0.0.1:2182. Will not attempt to authenticate using SASL (unknown error)  
  20. 2015-08-12 20:55:23,703 [myid:] - INFO  [main-SendThread(127.0.0.1:2182):ClientCnxn$SendThread@852] - Socket connection established to 127.0.0.1/127.0.0.1:2182, initiating session  
  21. 2015-08-12 20:55:23,718 [myid:] - INFO  [main-SendThread(127.0.0.1:2182):ClientCnxn$SendThread@1235] - Session establishment complete on server 127.0.0.1/127.0.0.1:2182, sessionid = 0x24f21e1b05b0000, negotiated timeout = 30000  
  22. Welcome to ZooKeeper!  
  23.   
  24. WATCHER::  
  25.   
  26. WatchedEvent state:SyncConnected type:None path:null  
  27. JLine support is enabled  
  28. [zk: 127.0.0.1:2182(CONNECTED) 0]   

出现以上信息表示连通成功。

附:

看到有些人配置伪集群是将压缩包压缩后拷贝几个副本,每个副本代表一个zookeeper服务,个人觉得没必要,只有拷贝配置文件并修改就行,一个配置文件代表一个zookeeper服务。

posted @ 2017-05-10 17:47  撒_旦  阅读(589)  评论(0编辑  收藏  举报