架构细节:
(1)所有的redis节点彼此互联(PING-PONG机制),内部使用二进制协议优化传输速度和带宽.
(2)节点的fail是通过集群中超过半数的节点检测失效时才生效.(通过这里可以看出:集群至少要有三个节点才能成立)----(redis-cluster投票:容错)
(3)客户端与redis节点直连,不需要中间proxy(代理)层.客户端不需要连接集群所有节点,连接集群中任何一个可用节点即可
(4)redis-cluster把所有的物理节点映射到[0-16383]slot上,cluster 负责维护node<->slot<->value
Redis 集群中内置了 16384 个哈希槽slot,当需要在 Redis 集群中放置一个 key-value 时,redis 先对 key 使用 crc16 算法算出一个结果,然后把结果对 16384 求余数,这样每个 key 都会对应一个编号在 0-16383 之间的哈希槽,redis 会根据节点数量大致均等的将哈希槽映射到不同的节点,这样,最大的节点数就是16384(对应一个槽一个节点)
1.1. Redis集群的搭建
Redis集群中至少应该有三个节点。要保证集群的高可用,需要每个节点有一个备份机。
Redis集群至少需要6台服务器。
搭建伪分布式。可以使用一台虚拟机运行6个redis实例。需要修改redis的端口号7001-7006
集群搭建环境
1、使用ruby脚本搭建集群。需要ruby的运行环境。
安装ruby
yum install ruby
yum install rubygems
2、安装ruby脚本运行使用的包。
[root@localhost ~]# gem install redis-3.0.0.gem
Successfully installed redis-3.0.0
1 gem installed
Installing ri documentation forredis-3.0.0...
Installing RDoc documentation forredis-3.0.0...
[root@localhost ~]#
[root@localhost ~]# cd redis-3.0.0/src
[root@localhost src]# ll *.rb
-rwxrwxr-x. 1 root root 48141 Apr 1 2015redis-trib.rb
需要6台redis服务器。搭建伪分布式。
需要6个redis实例。
需要运行在不同的端口7001-7006
第一步:创建6个redis实例,每个实例运行在不同的端口。需要修改redis.conf配置文件。配置文件中还需要把cluster-enabled yes前的注释去掉。
第二步:启动每个redis实例。
第三步:使用ruby脚本搭建集群。
./redis-trib.rb create --replicas 1 192.168.25.153:7001 192.168.25.153:7002 192.168.25.153:7003 192.168.25.153:7004 192.168.25.153:7005 192.168.25.153:7006
创建关闭集群的脚本:
[root@localhost redis-cluster]# vim shutdow-all.sh
redis01/redis-cli -p 7001 shutdown
redis01/redis-cli -p 7002 shutdown
redis01/redis-cli -p 7003 shutdown
redis01/redis-cli -p 7004 shutdown
redis01/redis-cli -p 7005 shutdown
redis01/redis-cli -p 7006 shutdown
[root@localhost redis-cluster]# chmod u+x shutdow-all.sh
[html]
1. [root@localhost redis-cluster]# ./redis-trib.rb create --replicas 1 192.168.25.153:7001 192.168.25.153:7002 192.168.25.153:7003 192.168.25.153:7004 192.168.25.153:7005 192.168.25.153:7006
2. >>> Creating cluster
3. Connecting to node 192.168.25.153:7001: OK
4. Connecting to node 192.168.25.153:7002: OK
5. Connecting to node 192.168.25.153:7003: OK
6. Connecting to node 192.168.25.153:7004: OK
7. Connecting to node 192.168.25.153:7005: OK
8. Connecting to node 192.168.25.153:7006: OK
9. >>> Performing hash slots allocation on 6 nodes...
10. Using 3 masters:
11. 192.168.25.153:7001
12. 192.168.25.153:7002
13. 192.168.25.153:7003
14. Adding replica 192.168.25.153:7004 to 192.168.25.153:7001
15. Adding replica 192.168.25.153:7005 to 192.168.25.153:7002
16. Adding replica 192.168.25.153:7006 to 192.168.25.153:7003
17. M: 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3 192.168.25.153:7001
18. slots:0-5460 (5461 slots) master
19. M: 8cd93a9a943b4ef851af6a03edd699a6061ace01 192.168.25.153:7002
20. slots:5461-10922 (5462 slots) master
21. M: 2935007902d83f20b1253d7f43dae32aab9744e6 192.168.25.153:7003
22. slots:10923-16383 (5461 slots) master
23. S: 74f9d9706f848471583929fc8bbde3c8e99e211b 192.168.25.153:7004
24. replicates 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3
25. S: 42cc9e25ebb19dda92591364c1df4b3a518b795b 192.168.25.153:7005
26. replicates 8cd93a9a943b4ef851af6a03edd699a6061ace01
27. S: 8b1b11d509d29659c2831e7a9f6469c060dfcd39 192.168.25.153:7006
28. replicates 2935007902d83f20b1253d7f43dae32aab9744e6
29. Can I set the above configuration? (type 'yes' to accept): yes
30. >>> Nodes configuration updated
31. >>> Assign a different config epoch to each node
32. >>> Sending CLUSTER MEET messages to join the cluster
33. Waiting for the cluster to join.....
34. >>> Performing Cluster Check (using node 192.168.25.153:7001)
35. M: 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3 192.168.25.153:7001
36. slots:0-5460 (5461 slots) master
37. M: 8cd93a9a943b4ef851af6a03edd699a6061ace01 192.168.25.153:7002
38. slots:5461-10922 (5462 slots) master
39. M: 2935007902d83f20b1253d7f43dae32aab9744e6 192.168.25.153:7003
40. slots:10923-16383 (5461 slots) master
41. M: 74f9d9706f848471583929fc8bbde3c8e99e211b 192.168.25.153:7004
42. slots: (0 slots) master
43. replicates 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3
44. M: 42cc9e25ebb19dda92591364c1df4b3a518b795b 192.168.25.153:7005
45. slots: (0 slots) master
46. replicates 8cd93a9a943b4ef851af6a03edd699a6061ace01
47. M: 8b1b11d509d29659c2831e7a9f6469c060dfcd39 192.168.25.153:7006
48. slots: (0 slots) master
49. replicates 2935007902d83f20b1253d7f43dae32aab9744e6
50. [OK] All nodes agree about slots configuration.
51. >>> Check for open slots...
52. >>> Check slots coverage...
53. [OK] All 16384 slots covered.
54. [root@localhost redis-cluster]#
集群的使用方法
Redis-cli连接集群。
[root@localhost redis-cluster]#redis01/redis-cli -p 7002 -c
-c:代表连接的是redis集群
项目中使用
需要把jedis依赖的jar包添加到工程中。Maven工程中需要把jedis的坐标添加到依赖。
推荐添加到服务层。XX
-xxxx-Service
工程中
测试demo:
package cn.e3mall.jedis;
import java.util.HashSet;
import java.util.Set;
import org.junit.Test;
import redis.clients.jedis.HostAndPort;
import redis.clients.jedis.Jedis;
import redis.clients.jedis.JedisCluster;
import redis.clients.jedis.JedisPool;
public class JedisTest {
@Test
public void testJedis() throws Exception {
// 连接单机版
// 创建一个连接Jedis对象,参数:host port
Jedis jedis = new Jedis("192.168.25.128", 6379);
// 直接使用jedis操作redis。所有jedis的命令都对应一个方法
jedis.set("test123", "111aaa");
String string = jedis.get("test123");
System.out.println(string);
// 关闭连接
jedis.close();
}
@Test
public void testJedisPool() throws Exception {
// 连接单机版使用连接池
// 第一步:创建一个JedisPool(连接池)对象。需要指定服务端的ip及端口。
JedisPool jesidPool = new JedisPool("192.168.25.128", 6379);
// 第二步:从JedisPool中获得一个连接(Jedis对象)。
Jedis jedis = jesidPool.getResource();
// 第三步:使用Jedis操作redis服务器。
// jedis.set("test321", "222bbb");
String result = jedis.get("test123");
System.out.println(result);
// 第四步:操作完毕后关闭jedis对象,连接池回收资源。
jedis.close();
// 第五步:关闭JedisPool对象。
jesidPool.close();
}
@Test
public void testJedisCluster() throws Exception {
// 第一步:创建一个JedisCluster对象。需要一个Set<HostAndPort>参数nodes(即ip跟端口的节点对象的集合)。Redis节点的列表。
Set<HostAndPort> nodes = new HashSet<>();
nodes.add(new HostAndPort("192.168.25.128", 7001));
nodes.add(new HostAndPort("192.168.25.128", 7002));
nodes.add(new HostAndPort("192.168.25.128", 7003));
nodes.add(new HostAndPort("192.168.25.128", 7004));
nodes.add(new HostAndPort("192.168.25.128", 7005));
nodes.add(new HostAndPort("192.168.25.128", 7006));
JedisCluster jedisCluster = new JedisCluster(nodes);
// 第二步:直接使用JedisCluster对象操作redis。在系统中单例存在。
jedisCluster.set("hello", "100");
String result = jedisCluster.get("hello");
// 第三步:打印结果
System.out.println(result);
// 第四步:系统关闭前,关闭JedisCluster对象。
jedisCluster.close();
}
}