创建用户

一般我倾向于把需要启动daemon进程,对外提供服务的程序,即服务器类的程序,安装在单独的用户下面。这样可以做到隔离,运维方面,安全性也提高了。

创建一个新的group,

$ sudo groupadd zookeeper

创建一个新的用户,并加入group,

$ sudo useradd -g zookeeper zookeeper

给新用户设置密码,

$ sudo passwd zookeeper

1. 单机模式(Standalone mode)


单机模式


单机模式在开发和调试阶段很有用。

1.1 下载,解压

$ wget  http://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.4.5/zookeeper-3.4.5.tar.gz



$ tar zxf zookeeper-3.4.5.tar.gz -C ~/local/opt

1.2 启动

默认就是单机模式,

$ mv conf/zoo_sample.cfg conf/zoo.cfg



$ ./bin/zdServer.sh start

1.3 使用java 客户端连接ZooKeeper

$ ./bin/zkCli.sh -server 127.0.0.1:2181

然后就可以使用各种命令了,跟文件操作命令很类似,输入help可以看到所有命令。

1.4 关闭

$ ./bin/zdServer.sh stop


2 分布式模式(Replicated mode)


在生产环境中,要配置成分布式模式,才能发挥威力。

ZooKeeper集群一般被称为ZooKeeper ensemble,或者 quorum.



2.1 准备3台机器

假设有三台机器,hostname和ip对应关系是:

192.168.40.107 hadoop107

192.168.40.104 hadoop104

192.168.40.108 hadoop108



ZooKeeper不存在明显的master/slave关系,各个节点都是服务器,leader挂了,会立马从follower中选举一个出来作为leader.

由于没有主从关系,也不用配置SSH无密码登录了,各个zk服务器是自己启动的,互相之间通过TCP端口来交换数据。



2.2 修改hadoop107的配置文件conf/zoo.cfg


tickTime=2000 initLimit=10 syncLimit=5 dataDir=/root/hadoop/zookeeper-3.4.6/zookeeperdatadir/data
dataLogDir=/root/hadoop/zookeeper-3.4.6/zookeeperdatadir/logs
clientPort=2181server.1=hadoop107:2888:3888 server.2=hadoop104:2888:3888server.3=hadoop108:2888:3888

修改完后拷贝到 hadoop104,以及 hadoop108上


2.3 myid文件

要在每台机器的dataDir下,新建一个myid文件,里面存放一个数字,用来标识当前主机。

hadoop107 :$ echo "1" >> /root/hadoop/zookeeper-3.4.6/zookeeperdatadir/data/myid

hadoop104 :$ echo "2" >> /root/hadoop/zookeeper-3.4.6/zookeeperdatadir/data/myid

hadoop108 :$ echo "3" >> /root/hadoop/zookeeper-3.4.6/zookeeperdatadir/data/myid



2.4 启动每台机器

hadoop107 :$ zookeeper-3.4.6/bin/zkServer.sh 

start

:$ zookeeper-3.4.6/bin/zkServer.sh 

start

:$ zookeeper-3.4.6/bin/zkServer.sh start


因为3个节点的启动是有顺序的,所以在陆续启动三个节点的时候,前面先启动的节点连接未启动的节点的时候会报出一些错误。可以忽略。

2.5 查看状态

$ zookeeper-3.4.6/bin/zkServer.sh status


hadoop107的状态

在CentOS上安装ZooKeeper集群_在CentOS上安装ZooKeeper集

hadoop104的状态

在CentOS上安装ZooKeeper集群_在CentOS上安装ZooKeeper集_02


3 使用java客户端连接ZooKeeper集群

找一台机器,解压zookeeper压缩包,不用配置,就可以使用java客户端连接ZooKeeper集群中的任意一台服务器了。

$ ./bin/zkCli.sh -server hadoop104:2181


在CentOS上安装ZooKeeper集群_在CentOS上安装ZooKeeper集_03