Linux安装Redis集群版
- 1.Redis集群原理
- 1.1.Redis-cluster架构图
- 1.2.Redis-cluster投票&容错
- 2.redis集群搭建
- 2.1.准备6个节点
- 2.1.1.复制实例
- 2.1.2.启动6个实例
- 2.2.安装环境
- 2.3.安装redis集群
- 2.3.1.配置集群节点
- 2.3.2.集群创建
- 3.Redis集群连接
- 3.1.工具连接
- 3.2.代码连接
1.Redis集群原理
1.1.Redis-cluster架构图
1、所有的redis节点彼此互联(PING-PONG机制),内部使用二进制协议优化传输速度和带宽。
2、节点的fail是通过集群中超过半数的节点检测失效时才生效。
3、客户端与redis节点直连,不需要中间proxy层。客户端不需要连接集群所有节点,连接集群中任何一个可用节点即可。
4、redis-cluster把所有的物理节点映射到[0-16383]slot上,cluster 负责维护node<->slot<->value
Redis 集群中内置了 16384 个哈希槽,当需要在 Redis 集群中放置一个 key-value 时,redis 先对 key 使用 crc16 算法算出一个结果,然后把结果对 16384 求余数,这样每个 key 都会对应一个编号在 0-16383 之间的哈希槽,redis 会根据节点数量大致均等的将哈希槽映射到不同的节点。一个节点对应一台redis服务器。16384个哈希槽最大可以对应16384台redis服务器。
1.2.Redis-cluster投票&容错
投票过程是集群中所有master参与,如果半数以上master节点与master节点通信超时(cluster-node-timeout),认为当前master节点挂掉。
什么时候整个集群不可用(cluster_state:fail)?
A:如果集群任意master挂掉,且当前master没有slave.集群进入fail状态,也可以理解成集群的slot映射[0-16383]不完整时进入fail状态. ps : redis-3.0.0.rc1加入cluster-require-full-coverage参数,默认关闭,打开集群兼容部分失败。
B:如果集群超过半数以上master挂掉,无论是否有slave,集群进入fail状态。
2.redis集群搭建
2.1.准备6个节点
为了保证可以进行投票,至少需要3个主节点,每个主节点都需要至少一个从节点,所以需要至少3个从节点。
一共需要6台redis服务器;可以使用6个redis实例。6个redis实例的端口号:7001~7006
2.1.1.复制实例
# 停止redis
./redis-cli shutdown
# 把bin目录里面的rdb,和aof文件删除,准备干净的redis
cd /usr/local/redis/bin
rm -f appendonly.aof
rm -f dump.rdb
# 把bin复制6份
cd ..
# 创建redis-cluster目录
mkdir redis-cluster
cp -r bin redis-cluster/redis1 && cp -r bin redis-cluster/redis2 && cp -r bin redis-cluster/redis3
cp -r bin redis-cluster/redis4 && cp -r bin redis-cluster/redis5 && cp -r bin redis-cluster/redis6
# 修改端口号
依次修改端口号为7001~7006
cd redis1
vi redis.conf
# 修改第92行,端口6379为7001
port 6379 修改为 port 7001
# 其它5个一样修改
2.1.2.启动6个实例
cd /usr/local/redis/redis-cluster
# 编写启动脚本
vi start-all.sh
# 在文件中输入如下内容:
cd redis1
./redis-server redis.conf
cd ..
cd redis2
./redis-server redis.conf
cd ..
cd redis3
./redis-server redis.conf
cd ..
cd redis4
./redis-server redis.conf
cd ..
cd redis5
./redis-server redis.conf
cd ..
cd redis6
./redis-server redis.conf
cd ..
# 设置脚本启动权限
chmod u+x start-all.sh
# 执行脚本;启动6个实例
./start-all.sh
# 查看
ps -ef | grep redis
# 停止6个redis
ps -ef | grep redis
kill -9 进程号 进程号 ...
2.2.安装环境
redis集群的管理工具使用的是ruby脚本语言,安装集群需要ruby环境。
# 安装ruby环境(上课提供的虚拟机,环境已经装好)
yum -y install ruby
# 安装ruby的打包系统
yum -y install rubygems
# 安装redis-4.0.0.gem的ruby接口库
cd /root
使用rz 上传“redis-4.0.0.gem”
# 安装
gem install redis-4.0.0.gem
# 安装rvm
curl -L get.rvm.io | bash -s stable
# rvm立即有效
source /usr/local/rvm/scripts/rvm
# 查看rvm库中已知的ruby版本
rvm list known
# 安装一个ruby版本
rvm install 2.3.4
# 使用一个ruby版本
rvm use 2.3.4
# 查看ruby版本
ruby --version
# 卸载一个已知版本
rvm remove 2.0.0
# 再次安装redis-4.0.0.gem
gem install redis-4.0.0.gem
2.3.安装redis集群
2.3.1.配置集群节点
#需要修改每个实例的redis.conf配置文件,开启redis-cluster
cd /usr/local/redis/redis-cluster/
vi redis1/redis.conf
# 取消第814行注释(设置集群可用): cluster-enabled yes
# 需要修改其它5个节点;同样修改
# 重启redis实例
./start-all.sh
2.3.2.集群创建
集群管理工具在redis解压文件夹的src的文件夹中;使用redis-trib.rb命令创建集群。
# 先进入集群管理工具所在的路径
cd /root/redis-4.0.8/src/
# 执行创建命令(注意如下连接中的ip最好不用127.0.0.1和默认端口)
./redis-trib.rb create --replicas 1 192.168.12.131:7001 192.168.12.131:7002 192.168.12.131:7003 192.168.12.131:7004 192.168.12.131:7005 192.168.12.131:7006
格式:./redis-trib.rb create --replicas 1 ip:port
./redis-trib.rb 创建 副本 1 ip:port
说明:至少6个节点
启动信息(中间需要输入yes,查看如下红色字体)
Creating cluster
Performing hash slots allocation on 6 nodes…
Using 3 masters:
192.168.12.131:7001
192.168.12.131:7002
192.168.12.131:7003
Adding replica 192.168.12.131:7005 to 192.168.12.131:7001
Adding replica 192.168.12.131:7006 to 192.168.12.131:7002
Adding replica 192.168.12.131:7004 to 192.168.12.131:7003Trying to optimize slaves allocation for anti-affinity
[WARNING] Some slaves are in the same host as their master
M: 7fd7b96faa98e78011c903227c5d98bfd9cfe831 192.168.12.131:7001
slots:0-5460 (5461 slots) master
M: 04343bfff821e4503ebe31f0fc2d59851b7e2464 192.168.12.131:7002
slots:5461-10922 (5462 slots) master
M: e9854ee247af4d0c44fa51c480a5adb0576a5276 192.168.12.131:7003
slots:10923-16383 (5461 slots) master
S: b4d2af3646595ad72328c5c342b87917ab7b3e2d 192.168.12.131:7004
replicates 7fd7b96faa98e78011c903227c5d98bfd9cfe831
S: 76978cb6e7ce589af9c8b9d6f00682fcd5f8371d 192.168.12.131:7005
replicates 04343bfff821e4503ebe31f0fc2d59851b7e2464
S: 56f0a1bb29c3e8a80183e3f071a5bee861cfd548 192.168.12.131:7006
replicates e9854ee247af4d0c44fa51c480a5adb0576a5276
Can I set the above configuration? (type ‘yes’ to accept): yesNodes configuration updated
Assign a different config epoch to each node
Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join…Performing Cluster Check (using node 192.168.12.131:7001)
M: 7fd7b96faa98e78011c903227c5d98bfd9cfe831 192.168.12.131:7001
slots:0-5460 (5461 slots) master
1 additional replica(s)
S: 76978cb6e7ce589af9c8b9d6f00682fcd5f8371d 192.168.12.131:7005
slots: (0 slots) slave
replicates 04343bfff821e4503ebe31f0fc2d59851b7e2464
M: 04343bfff821e4503ebe31f0fc2d59851b7e2464 192.168.12.131:7002
slots:5461-10922 (5462 slots) master
1 additional replica(s)
M: e9854ee247af4d0c44fa51c480a5adb0576a5276 192.168.12.131:7003
slots:10923-16383 (5461 slots) master
1 additional replica(s)
S: b4d2af3646595ad72328c5c342b87917ab7b3e2d 192.168.12.131:7004
slots: (0 slots) slave
replicates 7fd7b96faa98e78011c903227c5d98bfd9cfe831
S: 56f0a1bb29c3e8a80183e3f071a5bee861cfd548 192.168.12.131:7006
slots: (0 slots) slave
replicates e9854ee247af4d0c44fa51c480a5adb0576a5276
[OK] All nodes agree about slots configuration.Check for open slots…
Check slots coverage…
[OK] All 16384 slots covered.
3.Redis集群连接
3.1.工具连接
redis的单机版,默认是16个数据库,但是redis-Cluster集群版,有n个数据库(多个主数据库则多少个,整个集群算是一个数据库)。
# 使用redis命令行客户端连接
cd /usr/local/redis/bin
./redis-cli -h 192.168.12.131 -p 7006 -c
【注意】一定要加-c参数,节点之间则可以互相跳转
说明:使用图形客户端连接时;因为有3台主redis数据库,所以需要连接3台。
3.2.代码连接
/** 使用JedisCluster集群对象 */
@Test
public void test() throws Exception{
/** 定义Set集合封装主机与端口HostAndPort(集群节点) */
Set<HostAndPort> nodes = new HashSet<>();
/** 添加多个集群节点 */
nodes.add(new HostAndPort("192.168.12.131", 7001));
nodes.add(new HostAndPort("192.168.12.131", 7002));
nodes.add(new HostAndPort("192.168.12.131", 7003));
nodes.add(new HostAndPort("192.168.12.131", 7004));
nodes.add(new HostAndPort("192.168.12.131", 7005));
nodes.add(new HostAndPort("192.168.12.131", 7006));
/** 创建JedisCluster集群对象 */
JedisCluster jedisCluster = new JedisCluster(nodes);
/** 设置数据 */
jedisCluster.set("test", "jedisCluster");
/** 获取数据 */
System.out.println(jedisCluster.get("test"));
/** 关闭JedisCluster */
jedisCluster.close();
}