Redis是一个基于key-value的高速缓存系统,类似于memcached,但是支持更复杂的数据结构List、Set、Sorted Set,并且有持久化的功能。
Redis:
KV cache and store
in-memory
持久化
主从(借助于sentinel实现一定意义上的HA)
Clustering(分布式)
数据结构服务器:
String, List, Hash, Set, Sorted Set, Bitmap, HyperLoglog
存储系统有三类:
RDBMS
NoSQL:
KV NoSQL:redis
Column Family NoSQL: HBase
Documentation NoSQL: MongoDB
Graph NoSQL: Neo4j
NewSQL
Redis的组件:
redis.io
Redis守护进程:
监听端口:6379/tcp
Strings:
SET key value [EX #] [NX|XX]
GET
INCR
DECR
EXIST
Lists:
LPUSH
RPUSH
LPOP
RPOP
LINDEX
LSET
Sets:
SADD
SINTER
SUNION
SPOP
SISMEMBER
Sorted Sets:
ZADD
ZRANGE
ZCARD
ZRANK
Hashes:
HSET
HSETNX
HGET
HKEYS
HVALS
HDEL
Bitmaps, HyperLogLog
认证实现方法:
(1) redis.conf
requirepass PASSWORD
(2) redis-cli
AUTH PASSWORD
清空数据库:
FLUSHDB:清空当前库
FLUSHALL:清空所有库
事务:
通过MULTI, EXEC, WATCH等命令实现事务功能;将一个或多个命令归并为一个操作提请服务器按顺序执行的机制;不支持回滚操作;
MULTI:启动一个事务;
EXEC: 执行事务;
一次性将事务中的所有操作执行完成后返回给客户端;
WATCH:乐观锁;在EXEC命令执行之前,用于监视指定数量键;如果监视中的某任意键数据被修改,则服务器拒绝执行事务;
Connection相关的命令:
AUTH
ECHO
PING
QUIT
SELECT
Server相关的命令:
CLIENT SETNAME connection-name
CLIENT GETNAME
CLIENT KILL ip:port
CONFIG GET
CONFIG RESETSTAT
CONFIG SET parameter value
CONFIG REWRITE
DBSIZE
BGSAVE
SAVE
LASTSAVE
发布与订阅(publish/subscribe)
频道:消息队列
SUBSCRIBE: 订阅一个或多个队列;
PUBLISH: 向频道发布消息;
UNSUBSCRIBE:退订此前订阅的频道;
PSUBSCRIBE:模式订阅
Redis的持久化:
RDB和AOF
RDB: snapshot,二进制格式;按事先定制的策略,周期性地将数据保存至磁盘;数据文件默认为dump.rdb;
客户端也可显式使用SAVA或BGSAVE命令启动快照保存机制;
SAVE: 同步,在主线程中保存快照;此时会阻塞所有客户端请求;
BGSAVE:异步,
AOF:Append Only File
记录每一次写操作至指定的文件尾部实现持久化;当redis重启时,可通过重新执行文件中的命令在内存重建数据库;
BGREWRITEAOF:AOF文件重写;
不会读取正在使用AOF文件,而通过将内存中的数据以命令的方式保存到临时文件中,完成之后替换原来的AOF文件;
RDB:
SAVE 900 1
SAVE 300 10
SAVE 60 10000
stop-writes-on-bgsave-error yes
rdbcompression yes
rdbchecksum yes
dbfilename dump.rdb
dir /var/lib/redis
AOF:
重写过程:
(1) redis主进程通过fork创建子进程;
(2) 子进程根据redis内存中的数据创建数据库重建命令序列于临时文件中;
(3) 父进程继承client的请求,并会把这些请求中的写操作继续追加至原来AOF文件;额外地,这些新的写请求还会被放置于一个缓冲队列中;
(4) 子进程重写完成,会通知父进程;父进程把缓冲中的命令写到临时文件中
(5) 父进程用临时文件替换老的aof文件;
相关参数:
appendonly no
appendfilename "appendonly.aof"
appendfsync {always|everysec|no}
no-appendfsync-on-rewrite no
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
注意:持久本身不能取代备份;还应该制定备份策略,对redis数据库定期进行备份;
RDB与AOF同时启用:
(1) BGSAVE和BGREWRITEAOF不会同时执行;
(2) 在Redis服务器启动用于恢复数据时,会优先使用AOF;
复制:
特点:
一个Master可以有多个Slave;
支持链式复制;
Master以非阻塞方式同步数据至slave;
slave:
> SLAVAOF MASTER_IP MASTER_PORT
注意:如果master使用requirepass开启了认证功能,从服务器要使用masterauth <PASSWORD>来连入服务请求使用此密码进行认证;
sentinel:
用于管理多个redis服务实现HA;
监控
通知
自动故障转移
流言协议,投票协议
程序:
redis-sentinel /path/to/file.conf
redis-server /path/to/file.conf --sentinel
(1) 服务器自身初始化,运行redis-server中专用于sentinel功能的代码;
(2) 初始化sentinel状态,根据给定的配置文件,初始化监控的master服务器列表;
(3) 创建连向master的连接;
专用配置文件:/etc/redis-sentinel.conf
(1) # sentinel monitor <master-name> <ip> <redis-port> <quorum>
sentinel monitor mymaster 127.0.0.1 6379 2
(2) sentinel down-after-milliseconds <master-name> <milliseconds>
sentinel down-after-milliseconds mymaster 30000
(3) sentinel parallel-syncs <master-name> <numslaves>
sentinel parallel-syncs mymaster 1
(4) sentinel failover-timeout <master-name> <milliseconds>
sentinel failover-timeout mymaster 180000
主观下线,客观下线:
主观下线:一个sentinel实例判断出某节点下线;
客观下线:多个sentinel节点协商后判断出某节点下线;
专用命令:
SENTINEL masters
SENTINEL slaves <master name>
SENTINEL get-master-addr-by-name <master name>
SENTINEL reset
SENTINEL failover <master name>
Clustering:
分布式数据库,通过分片机制进行数据分布,clustering内的每个节点仅数据库的一部分数据;
每个节点持有全局元数据,但仅持有一部分数据;