redis集群框架 redis集群架构图

Redis服务集群架构(主从复制、哨兵模式、群集模式）看这一篇就够了

• 一、Redis主从复制

• 1、Redis主从复制的概念
• 2、Redis主从复制的作用
• 3、Redis主从复制的流程

• 二、Redis主从复制的搭建

• 1、关闭防火墙和安全组件（所有主机）
• 2、安装redis软件包（所有主机）
• 3、修改Master节点Redis配置文件
• 4、修改Slave节点Redis配置文件
• 5、验证主从效果

• 三、Redis 哨兵模式

• 1、哨兵模式的原理
• 2、哨兵模式的作用
• 3、哨兵模式的结构

• 四、哨兵模式的搭建

• 1、修改 Redis 配置文件（所有节点操作）
• 2、启动哨兵模式
• 3、查看哨兵模式信息
• 4、故障模拟

• 五、Redis 群集模式

• 1、redis群集的概念
• 2、集群的作用
• 3、Redis集群的数据分片

• 六、搭建Redis 群集模式

• 1、创建并复制相关文件
• 2、修改配置文件，开启群集功能
• 3、启动redis节点
• 4、启动集群
• 5、测试群集

一、Redis主从复制

1、Redis主从复制的概念

2、Redis主从复制的作用

3、Redis主从复制的流程

二、Redis主从复制的搭建

redis-5.0.7.tar.gz
链接: ridis相关软件包 提取码: 66qg

主机 IP地址 安装包
Master 192.168.221.20 redis-5.0.7.tar.gz
Slave1 192.168.221.30 redis-5.0.7.tar.gz
Slave2 192.168.221.40 redis-5.0.7.tar.gz

1、关闭防火墙和安全组件（所有主机）

systemctl stop firewalld
setenforce 0

2、安装redis软件包（所有主机）

#!/bin/bash
echo -e "\033[31m =====正在验证当前为仅主机还是NAT模式===== \033[0m"
ping -c1 -W1 www.baidu.com &> /dev/null
if [ $? -eq 0 ];then echo -e "\033[31m 检测当前为NAT模式，为您配置在线yum源 \033[0m"
mkdir -p /etc/yum.repos.d/repo.bak

mv -f /etc/yum.repos.d/* /etc/yum.repos.d/repo.bak &> /dev/null

wget -O /etc/yum.repos.d/CentOS-Base.repo https://mirrors.aliyun.com/repo/Centos-7.repo &> /dev/null

yum clean all &> /dev/null
yum list &> /dev/null
echo -e "\033[31m 在线源已配置完成 \033[0m"

else
echo -e "\033[31m 检测当前为仅主机模式，为您配置本地yum源 \033[0m"
mount /dev/sr0 /mnt &> /dev/null
cd /etc/yum.repos.d/
mkdir -p /etc/yum.repos.d/repo.bak

mv -f /etc/yum.repos.d/* /etc/yum.repos.d/repo.bak &> /dev/null

echo '[local]
name=local
baseurl=file:///mnt
enabled=1
gpgcheck=0' > /etc/yum.repos.d/local.repo
yum clean all &> /dev/null
yum makecache &> /dev/null

df -h | grep "/mnt" 
if [ $? -ne 0 ];then
echo -e "\033[31m 检测当前为仅主机模式，但光盘未连接！ \033[0m"
else
echo -e "\033[31m 本地yum源已配置完成 \033[0m"
fi
fi

#关闭防火墙
systemctl stop firewalld
setenforce 0
yum install -y gcc gcc-c++ make
yum -y install expect
cd /opt
tar zxvf redis-5.0.7.tar.gz -C /opt/
cd /opt/redis-5.0.7/
make
make PREFIX=/usr/local/redis install

cd /opt/redis-5.0.7/utils
/usr/bin/expect <<EOF
spawn ./install_server.sh
expect "instance" {send "\r"} 
expect "config" {send "\r"}
expect "log" {send "\r"}
expect "data" {send "\r"}
expect "executable" {send "/usr/local/redis/bin/redis-server\r"}
expect "abort" {send "\r"}
expect eof
EOF

ln -s /usr/local/redis/bin/* /usr/local/bin/
/etc/init.d/redis_6379 restart     

sed -i '/bind 127.0.0.1/c bind 0.0.0.0' /etc/redis/6379.conf
sed -i 's/appendonly no/appendonly yes/' /etc/redis/6379.conf

/etc/init.d/redis_6379 restart
/etc/init.d/redis_6379 status
netstat -natp | grep redis

3、修改Master节点Redis配置文件

Master：192.168.221.20

vim /etc/redis/6379.conf
#70行，修改bind 项，0.0.0.0监听所有网段
bind 0.0.0.0
#137行，开启守护进程
daemonize yes
#172行，指定日志文件目录
logfile /var/log/redis_6379.log
#264行，指定工作目录
dir /var/lib/redis/6379
#700行，开启AOF持久化功能
appendonly yes

/etc/init.d/redis_6379 restart

4、修改Slave节点Redis配置文件

Slave1：192.168.221.30
Slave2：192.168.221.40

vim /etc/redis/6379.conf
#70行，修改bind 项，0.0.0.0监听所有网卡
bind 0.0.0.0
#137行，开启守护进程
daemonize yes
#172行，指定日志文件目录
logfile /var/log/redis_6379.log
#264行，指定工作目录
dir /var/lib/redis/6379
#288行，指定要同步的Master节点IP和端口
replicaof 192.168.221.20 6379
#700行，开启AOF持久化功能
appendonly yes

/etc/init.d/redis_6379 restart

5、验证主从效果

Master：192.168.221.20

在Master节点上看日志
tail -f /var/log/redis_6379.log

redis-cli info replication

三、Redis 哨兵模式

1、哨兵模式的原理

2、哨兵模式的作用

3、哨兵模式的结构

四、哨兵模式的搭建

环境配置
此时主从复制已搭建完成

主机 IP地址 安装包
Master 192.168.221.20 redis-5.0.7.tar.gz
Slave1 192.168.221.30 redis-5.0.7.tar.gz
Slave2 192.168.221.40 redis-5.0.7.tar.gz

1、修改 Redis 配置文件（所有节点操作）

Master：192.168.221.20
Slave1：192.168.221.30
Slave2：192.168.221.40

vim /opt/redis-5.0.7/sentinel.conf
#17行，关闭保护模式
protected-mode no
#21行，Redis哨兵默认的监听端口
port 26379
#26行，指定sentinel为后台启动
daemonize yes
#36行，指定日志存放路径
logfile "/var/log/sentinel.log"
#65行，指定数据库存放路径
dir "/var/lib/redis/6379"
#84行，修改 指定该哨兵节点监控192.168.221.20:6379这个主节点，该主节点的名称是mymaster，最后的2的含义与主节点的故障判定有关：至少需要2个哨兵节点同意，才能判定主节点故障并进行故障转移
sentinel monitor mymaster 192.168.221.20 6379 2
#113行，判定服务器down掉的时间周期，默认30000毫秒（30秒）
sentinel down-after-milliseconds mymaster 30000
#146行，故障节点的最大超时时间为180000（180秒）
sentinel failover-timeout mymaster 180000

2、启动哨兵模式

Master：192.168.221.20
Slave1：192.168.221.30
Slave2：192.168.221.40
注意：先启master，再启slave

cd /opt/redis-5.0.7/
redis-sentinel sentinel.conf &

3、查看哨兵模式信息

Master：192.168.221.20

redis-cli -p 6573 info Sentinel

4、故障模拟

Master：192.168.221.20

#查看redis-server进程号
ps aux | grep redis
root       6074  0.2  0.4 156404  8228 ?        Ssl  16:39   0:15 /usr/local/redis/bin/redis-server 0.0.0.0:6379
root       6574  0.3  0.3 153844  7868 ?        Ssl  17:29   0:13 redis-sentinel *:26379 [sentinel]
root       7304  0.0  0.0 112676   980 pts/0    S+   18:42   0:00 grep --color=auto redis

#杀死 Master 节点上redis-server的进程号，模拟故障
kill -9  6074			#Master节点上redis-server的进程号

（5）验证结果

Master：192.168.221.20

tail -f /var/log/sentinel.log

redis-cli -p 26379 INFO Sentinel

五、Redis 群集模式

1、redis群集的概念

2、集群的作用

3、Redis集群的数据分片

六、搭建Redis 群集模式

redis的集群一般需要6个节点，3主3从。
先在六台服务器上安装redis数据库

主机 IP：端口
Master1 192.168.221.30:6371
Master2 192.168.221.40:6372
Master3 192.168.221.50:6373
Slave1 192.168.221.90:6374
Slave2 192.168.221.100:6375
Slave3 192.168.221.110:6376

1、创建并复制相关文件

所有节点

systemctl stop firewalld
setenforce 0
#创建文件，文件名要根据端口创建，方便区别
cd /etc/redis/
mkdir -p redis-cluster/redis6371 
cp /opt/redis-5.0.7/redis.conf /etc/redis/redis-cluster/redis6371/
cp /opt/redis-5.0.7/src/redis-cli /opt/redis-5.0.7/src/redis-server /etc/redis/redis-cluster/redis6371/

2、修改配置文件，开启群集功能

所有节点
先设置一个节点

cd /etc/redis/redis-cluster/redis6371
vim redis.conf
#69行，修改bind项，监听自己的IP
bind 192.168.221.20
#88行，修改，关闭保护模式
protected-mode no
#92行，修改，redis监听端口
port 6371
#136行，以独立进程启动
daemonize yes
#699行，修改，开启AOF持久化
appendonly yes
#832行，取消注释，开启群集功能
cluster-enabled yes
#840行，取消注释，修改，群集名称文件设置
cluster-config-file nodes-6371.conf
#846行，取消注释，群集超时时间设置
cluster-node-timeout 15000

其他节点直接远程复制过去
scp /etc/redis/redis-cluster/redis6371/redis.conf root@192.168.221.30:/etc/redis/redis-cluster/redis6371/redis.conf
scp /etc/redis/redis-cluster/redis6371/redis.conf root@192.168.221.40:/etc/redis/redis-cluster/redis6371/redis.conf
scp /etc/redis/redis-cluster/redis6371/redis.conf root@192.168.221.90:/etc/redis/redis-cluster/redis6371/redis.conf
scp /etc/redis/redis-cluster/redis6371/redis.conf root@192.168.221.100:/etc/redis/redis-cluster/redis6371/redis.conf
scp /etc/redis/redis-cluster/redis6371/redis.conf root@192.168.221.110:/etc/redis/redis-cluster/redis6371/redis.conf

其他服务器上修改3个地方
cd /etc/redis/redis-cluster/redis6372
vim redis.conf
#69行，修改bind项，监听自己的IP
bind 192.168.221.30
#92行，修改，redis监听端口
port 6372
#840行，取消注释，修改，群集名称文件设置
cluster-config-file nodes-6372.conf

其他服务器以此类推，改相应的bind和port

3、启动redis节点

所有节点

#每台服务器进入对应的文件中，执行命令
cd /etc/redis/redis-cluster/redis6371/
redis-server redis.conf

ps -ef |  grep redis

4、启动集群

Master1 192.168.221.20:6371

redis-cli --cluster create 192.168.221.20:6371 192.168.221.30:6372 192.168.221.40:6373 192.168.221.90:6374 192.168.221.100:6375 192.168.221.110:6376 --cluster-replicas 1

5、测试群集

redis-cli -h 192.168.221.20 -p 6371 -c   #加-c参数，节点之间就可以互相跳转	
cluster slots			#查看节点的哈希槽编号范围
set test srs
cluster keyslot test	#查看name键的槽编号