Zookeeper 集群, 是生产环境上使用最多的Zookeeper环境. Zookeeper 集群本身就是高可用的, 当集群中节点超过半数存活时, 集群就可以正常工作. 生产环境中, Zookeeper 集群通常会设置为奇数个节点, 一般设置三个节点就够用了. Zookeeper集群环境和单实例环境主要有三点差别:
- 配置文件中新增集群节点配置, 配置格式: server.序号=ip/主机名:同步数据通信端口号:选主通信端口号
- Zookeeper节点数据目录下, 新增myid 文件.
- 需要释放防火墙端口: 2181, 2888, 3888
1. Zookeeper 集群环境搭建
- 笔者始终认为, 对于任何一个软件或服务而言, 一个好的目录规划是非常重要的.
- 对于Zookeeper集群而言, 每台服务器上安装一个Zookeeper服务, 所以最好保证每台服务器目录, 端口均一致.
- 对于自定义的目录, 需手工创建: mkdir -p /opt/app/zookeeper /data/zookeeper /data/logs/zookeeper
服务器ip | 占用端口 | ZK 家目录 | ZK 数据目录 | ZK 日志目录 |
192.168.145.101 | 2181, 2888, 3888 | /opt/app/zookeeper/zookeeper-3.4.11 | /data/zookeeper | /data/logs/zookeeper |
192.168.145.102 | 2181, 2888, 3888 | /opt/app/zookeeper/zookeeper-3.4.11 | /data/zookeeper | /data/logs/zookeeper |
192.168.145.103 | 2181, 2888, 3888 | /opt/app/zookeeper/zookeeper-3.4.11 | /data/zookeeper | /data/logs/zookeeper |
1.1 安装Zookeeper
上传Zookeeper 压缩包, 解压即可.
$ tar -zxf zookeeper-3.4.11.tar.gz -C /opt/app/zookeeper
1.2 修改日志和jdk
修改bin/zkEnv.sh脚本, 第一非注释行设置日志路径. 如需指定jdk ,一并修改了即可.
#设置zk 启动日志目录
ZOO_LOG_DIR=/data/logs/zookeeper
# 如需指定jdk, 添加以下配置
# JAVA_HOME=/opt/app/jdk/jdk1.8.0_131
1.3 创建配置文件
每台服务器节点目录conf中均新增zoo.cfg 配置文件, 完全一致
# 时间单位, 毫秒
tickTime=2000
#集群中follwer节点与leader 节点初始化连接超时时间,单位为tickTime
initLimit=10
#集群中follwer节点与leader节点之前请求-响应超时时间,单位为tickTime
syncLimit=5
#数据存放目录: 记录当前的版本号和数据快照
dataDir=/data/zookeeper
#客户端连接端口
clientPort=2181
#格式: server.序号=ip/主机名:同步数据通信端口号:选主通信端口号
server.1=192.168.145.101:2888:3888
server.2=192.168.145.102:2888:3888
server.3=192.168.145.103:2888:3888
1.4 创建myid 文件
myid 文件是Zookeeper 节点在集群中的标识, id 需和配置中的一致.
服务器 | 执行脚本 |
192.168.145.101 | echo 1> /data/zookeeper/myid |
192.168.145.102 | echo 2> /data/zookeeper/myid |
192.168.145.103 | echo 3> /data/zookeeper/myid |
1.5 释放防火墙端口
如果有防火墙, 则需要释放防火墙端口: 2181, 2888, 3888. 不同操作系统的防火墙释放方式有些差异, 笔者虚拟机环境为centos
# firewall-cmd --zone=public --add-port=2181/tcp --permanent
# firewall-cmd --zone=public --add-port=2888/tcp --permanent
# firewall-cmd --zone=public --add-port=3888/tcp --permanent
# firewall-cmd --reload
2. 启动集群
依次登录各服务器, 执行启动命令即可.
$ zkServer.sh start
oKeeper JMX enabled by default
Using config: /opt/app/zookeeper/zookeeper-3.4.11/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED