redis-cluster提供的功能:

  1. 节点自动发现
  2. 主从选举,切换,集群容错
  3. 集群管理
  4. 在线分片
  5. ASK转向/MOVED转向机制

架构细节说明:

(1)所有的redis节点彼此互联(PING-PONG机制),内部使用二进制协议优化传输速度和带宽.

(2)节点的fail是通过集群中超过半数的master节点检测失效时才生效.

(3)客户端与redis节点直连,不需要中间proxy层.客户端不需要连接集群所有节点,连接集群中任何一个可用节点即可

(4)redis-cluster把所有的物理节点映射到[0-16383]slot上,cluster 负责维护node<->slot<->key


选举容错


(1)领导选举过程是集群中所有master参与,如果半数以上master节点与故障节点通信超过(cluster-node-timeout),认为该节点故障,自动触发故障转移操作.

(2):什么时候整个集群不可用(cluster_state:fail)? 

    a:如果集群任意master挂掉,且当前master没有slave.集群进入fail状态,也可以理解成集群的slot映射[0-16383]不完成时进入fail态.   redis-3.0.0.rc1加入cluster-require-full-coverage参数,默认关闭,打开集群兼容部分失败.

    b:如果集群超过半数以上master挂掉,无论是否有slave集群进入fail状态.

  ps:当集群不可用时,所有对集群的操作做都不可用,收到((error) CLUSTERDOWN The cluster is down)错误


搭建集群说明:本人用的是4台服务器来搭建,同时要让集群正常工作至少需要3个主节点,所以这里每台主机都会开启3个redis实例,就一共12个实例,(6个master和6个slave)

例如:

主机1:192.168.25.65

主机2:192.168.25.66

主机3:192.168.25.67

主机4:192.168.25.68


搭建的步骤:

1.先安装好redis,安装步骤请自行百度

2.在各个主机创建集群目录


mkdir -p /usr/local/RedisCluster
cd  /usr/local/RedisCluster
mkdir 7000 7001 7002
(依次在余下主机创建7003-7011)



3.修改redis.conf配置文件,并放进集群目录


cp /etc/redis/redis.conf /usr/local/RedisCluster/7000



按照如下修改:(每个实例都得修改,根据相应端口修改)


port 7000
daemonize yes
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes



4.分别启动7000-7011共12个redis实例


redis-server redis.conf

可以查看服务启动情况:

ps aux|grep redis


5.进入redis的目录将redis-trib.rb复制到/usr/local/bin目录下


cp redis-trib.rb /usr/local/bin/



6.安装ruby


yum -y install ruby ruby-devel rubygems rpm-build
gem install redis



7.创建集群(只需在其中一台主机上操作即可)


redis-trib.rb create --replicas 1 192.168.25.65:7000 192.168.25.65:7001 192.168.25.65:7002 192.168.25.66:7003 192.168.25.66:7004 192.168.25.66:7005 192.168.25.67:7006 192.168.25.67:7007 192.168.25.67:7008 192.168.25.68:7009 192.168.25.68:7010 192.168.25.68:7011



8.集群创建成功,连接方式为:redis-cli -h 192.168.25.65 -c -p 7000  (-c代表可连接到集群) ,进入redis,设置一个值,然后在其他节点上查看。同时当kill掉一个master节点,cluster会重新选举另一个节点当master



可能遇到的错误:

1.配置完所有主节点后,报" ERR Invalid node address specified"

    由于Redis-trib.rb 对域名或主机名支持不好,故在创建集群的时候要使用ip:port的方式

   redis-trib.rb create ip1:port1 ip2:port2 ip3:port3

2.出现err slot 0 is already busy (redis::commanderror)

 这时需要删除nodes-*.conf文件dump.rdb文件(每个服务器上都会生成,记得全部清空),然后重启每个redis实例