zookeeper伪分布式集群环境搭建

时间：2024-11-15 21:04:37

step1、下载

下载地址：http://zookeeper.apache.org/releases.html

将下载的压缩包放到用户家目录下（其他目录也可以）

step2、解压

  1. $tar –zxvf zookeeper-3.4.6.tar.gz

重命名

  1. $mv zookeeper-3.4.6 zookeeper

step3、配置

进入zookeeper/conf/目录下，将改目录下的zoo_sample.cfg配置文件拷贝4份，依次为zoo.cfg  zoo1.cfg  zoo2.cfg  zoo3.cfzookeeper伪分布式集群环境搭建

使用vim编辑zoo1.cfg  zoo2.cfg zoo3.cfg这三个配置文件

  1. $ vim zoo1.cfg

修改内容如下

zookeeper伪分布式集群环境搭建

配置说明

  • tickTime：这个时间是作为 Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔，也就是每个 tickTime 时间就会发送一个心跳。
  • initLimit：这个配置项是用来配置 Zookeeper 接受客户端（这里所说的客户端不是用户连接 Zookeeper 服务器的客户端，而是 Zookeeper 服务器集群中连接到 Leader 的 Follower 服务器）初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过 10个心跳的时间（也就是 tickTime）长度后 Zookeeper 服务器还没有收到客户端的返回信息，那么表明这个客户端连接失败。总的时间长度就是 10*2000=20 秒
  • syncLimit：这个配置项标识 Leader 与 Follower 之间发送消息，请求和应答时间长度，最长不能超过多少个 tickTime 的时间长度，总的时间长度就是 5*2000=10秒
  • dataDir：顾名思义就是 Zookeeper 保存数据的目录，默认情况下，Zookeeper 将写数据的日志文件也保存在这个目录里。
  • clientPort：这个端口就是客户端连接 Zookeeper 服务器的端口，Zookeeper 会监听这个端口，接受客户端的访问请求。
  • server.A=B：C：D：其中 A 是一个数字，表示这个是第几号服务器；B 是这个服务器的 ip 地址；C 表示的是这个服务器与集群中的 Leader 服务器交换信息的端口；D 表示的是万一集群中的 Leader 服务器挂了，需要一个端口来重新进行选举，选出一个新的 Leader，而这个端口就是用来执行选举时服务器相互通信的端口。如果是伪集群的配置方式，由于 B 都是一样，所以不同的 Zookeeper 实例通信端口号不能一样，所以要给它们分配不同的端口号。
使用vim修改zoo2.cfg的dataDir=/home/jianjian/zookeeper/server2/data,clientPort=2182,修改zoo3.cfg的dataDir=/home/jianjian/zookeeper/server3/data,clientPort=2183。dataDir目录开始不存在，需要手动创建，并在各data文件下创建名为myid的文件，文件内容对应服务器编号
  1. [jianjian@localhost zookeeper]$ echo 1 > server1/data/myid
  2. [jianjian@localhost zookeeper]$ echo 2 > server2/data/myid
  3. [jianjian@localhost zookeeper]$ echo 3 > server3/data/myid

step4、启动

进入目录/home/Hadoop/zookeeper/bin目录，执行命令：

  1. $zkServer.sh start zoo1.cfg

启动zoo1.cfg配置的服务，同理依次启动zoo2.cfg和zoo3.cfg所配置的服务

zookeeper伪分布式集群环境搭建

step5、查看状态

zookeeper伪分布式集群环境搭建

依次查看启动的三台服务，可见第二台服务为leader，第一台和三台为follower(试验好多次都是第二台是leader，只有一次是第三台是leader,醉~)

附：

当zkServer.sh start和zkServer.sh status命令不接配置文件参数是，默认使用conf/zoo.cfg作为参数

zookeeper伪分布式集群环境搭建

这是只启动一台服务的情况，可见Mode为standalone，只有一台服务的集群...

step6、连通测试

测试server2（leader，其他服务同理）是否连通

  1. [root@localhost bin]# ./zkCli.sh -server 127.0.0.1:2182
  2. Connecting to 127.0.0.1:2182
  3. 2015-08-12 20:55:23,658 [myid:] - INFO  [main:Environment@100] - Client environment:zookeeper.version=3.4.6-1569965, built on 02/20/2014 09:09 GMT
  4. 2015-08-12 20:55:23,661 [myid:] - INFO  [main:Environment@100] - Client environment:host.name=localhost.localdomain
  5. 2015-08-12 20:55:23,661 [myid:] - INFO  [main:Environment@100] - Client environment:java.version=1.7.0_79
  6. 2015-08-12 20:55:23,662 [myid:] - INFO  [main:Environment@100] - Client environment:java.vendor=Oracle Corporation
  7. 2015-08-12 20:55:23,662 [myid:] - INFO  [main:Environment@100] - Client environment:java.home=/usr/java/jdk1.7.0_79/jre
  8. 2015-08-12 20:55:23,662 [myid:] - INFO  [main:Environment@100] - Client environment:java.class.path=/home/jianjian/zookeeper/bin/../build/classes:/home/jianjian/zookeeper/bin/../build/lib/*.jar:/home/jianjian/zookeeper/bin/../lib/slf4j-log4j12-1.6.1.jar:/home/jianjian/zookeeper/bin/../lib/slf4j-api-1.6.1.jar:/home/jianjian/zookeeper/bin/../lib/netty-3.7.0.Final.jar:/home/jianjian/zookeeper/bin/../lib/log4j-1.2.16.jar:/home/jianjian/zookeeper/bin/../lib/jline-0.9.94.jar:/home/jianjian/zookeeper/bin/../zookeeper-3.4.6.jar:/home/jianjian/zookeeper/bin/../src/java/lib/*.jar:/home/jianjian/zookeeper/bin/../conf:
  9. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:java.library.path=/usr/java/packages/lib/i386:/lib:/usr/lib
  10. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:java.io.tmpdir=/tmp
  11. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:java.compiler=<NA>
  12. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:os.name=Linux
  13. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:os.arch=i386
  14. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:os.version=2.6.18-194.el5
  15. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:user.name=root
  16. 2015-08-12 20:55:23,663 [myid:] - INFO  [main:Environment@100] - Client environment:user.home=/root
  17. 2015-08-12 20:55:23,664 [myid:] - INFO  [main:Environment@100] - Client environment:user.dir=/home/jianjian/zookeeper/bin
  18. 2015-08-12 20:55:23,665 [myid:] - INFO  [main:ZooKeeper@438] - Initiating client connection, connectString=127.0.0.1:2182 sessionTimeout=30000 watcher=org.apache.zookeeper.ZooKeeperMain$MyWatcher@154ea79
  19. 2015-08-12 20:55:23,699 [myid:] - INFO  [main-SendThread(127.0.0.1:2182):ClientCnxn$SendThread@975] - Opening socket connection to server 127.0.0.1/127.0.0.1:2182. Will not attempt to authenticate using SASL (unknown error)
  20. 2015-08-12 20:55:23,703 [myid:] - INFO  [main-SendThread(127.0.0.1:2182):ClientCnxn$SendThread@852] - Socket connection established to 127.0.0.1/127.0.0.1:2182, initiating session
  21. 2015-08-12 20:55:23,718 [myid:] - INFO  [main-SendThread(127.0.0.1:2182):ClientCnxn$SendThread@1235] - Session establishment complete on server 127.0.0.1/127.0.0.1:2182, sessionid = 0x24f21e1b05b0000, negotiated timeout = 30000
  22. Welcome to ZooKeeper!
  23. WATCHER::
  24. WatchedEvent state:SyncConnected type:None path:null
  25. JLine support is enabled
  26. [zk: 127.0.0.1:2182(CONNECTED) 0]

出现以上信息表示连通成功。

附：

看到有些人配置伪集群是将压缩包压缩后拷贝几个副本，每个副本代表一个zookeeper服务，个人觉得没必要，只有拷贝配置文件并修改就行，一个配置文件代表一个zookeeper服务。

相关文章