NoSQL概述

NoSQL = not only sql
非关系型数据库

优势:

高并发读写 high performance
海量数据的高效率存储和访问 huge storage
高可扩展性和高可用性 high scalability high availability

NoSQL四大分类

键值对(key-value) redis
列存储  hbase
文档数据库 mongodb 
图形数据库  

NoSQL特点

易扩展
灵活的数据模型
大数据量,高性能
高可用
Redis概述

高性能键值对数据库

键值数据类型

字符串
列表
散列
集合
有序集合

应用场景

缓存
任务队列
网站访问统计
数据过期处理
分布式集群架构中的session分离
Redis安装

环境搭建

虚拟机 VMware 10.0.2
Linux centOS-6.5
ssh客户端 secureCRT 7.3 secureFX 7.3

Linux 下安装

下载地址:http://redis.io/download
Linx在线安装gcc,>yum install gcc-c++
filezilla将 redis压缩包 上传至linux
tar -zxvf redis压缩包名称
make编译
拷贝 redis.conf
前端启动 
后端启动 修改redis.conf -> deamonize yes
启动服务:/bin/redis-server ./redis.conf
查看启动情况:ps -ef | grep -i redis
停止:redis-cli shutdown
启动客户端:./bin/redis-cli

Window 下安装

下载地址:https://github.com/MSOpenTech/redis/releases

mac 下安装

执行 brew install redis

后台服务启动 brew services start redis
重启服务:brew services restart redis
或者直接启动:redis-server /usr/local/etc/redis.conf
打开客户端 redis-cli

通用设置

# 外网访问,注释本机访问
# bind 127.0.0.1

# 设置后台启动
daemonize yes

# 设置密码
requirepass <password>

开机自启
vim /etc/init.d/redis

#!/bin/bash
#chkconfig: 22345 10 90
#description: Start and Stop redis

# ===== 修改为自己的参数 ======
REDISPORT=6379
EXEC=/opt/redis-5.0.5/src/redis-server
CLIEXEC=/opt/redis-5.0.5/src/redis-cli

PIDFILE=/var/run/redis_${REDISPORT}.pid
CONF="/opt/redis-5.0.5/redis.conf"
# ===========

case "$1" in
    start)
        if [ -f $PIDFILE ];then
            echo "$PIDFILE exists,process is already running or crashed"
        else
            echo "Starting Redis server..."
            $EXEC $CONF
        fi
        ;;
    stop)
        if [ ! -f $PIDFILE ];then
            echo "$PIDFILE does not exist,process is not running"
        else
            PID=$(cat $PIDFILE)
            echo "Stopping..."
            $CLIEXEC -p $REDISPORT shutdown
            while [ -x /proc/${PID} ]
                do
                    echo "Waiting for Redis to shutdown..."
                    sleep 1
                done
                echo "Redis stopped"
        fi
        ;;
    restart)
        "$0" stop
        sleep 3
        "$0" start
        ;;
    *)
        echo "Please use start or stop or restart as first argument"
        ;;
esac

启动指令

# 脚本权限
chmod +x /etc/init.d/redis

# 配置redis开机启动
chkconfig redis on

# 把脚本添加到系统服务列表
chkconfig --add redis
chkconfig redis on
chkconfig --list   //查看所有注册的脚本文件

# 启动服务
service redis start

参考

  1. Redis配置开机自启动
  2. 设置redis服务开机自启动

链接测试:

# 本地客户端 
$ redis-cli  

# 登录后验证
> auth <password>

# 远程服务器 
$ redis-cli -h host -p port -a password

> ping
PONG
退出 $ quit

简单使用

127.0.0.1:6379> set name imool
OK
127.0.0.1:6379> get name
"imool"
127.0.0.1:6379> keys *
1) "name"
2) "a"
127.0.0.1:6379> del name
(integer) 1
127.0.0.1:6379> keys *
1) "a"

select num 切换数据库
move key db 移动
数据类型
string(字符串)set key value ; get key
hash(哈希)hmset key field value; hget key field; hgetall key
list(列表)lpush key value; lrange key start stop
set(集合)sadd key member; smembers key
zset(sorted set:有序集合)zadd key score member; zrangebyscore key min max

中文文档:http://www.redis.cn/commands.html

Redis keys 命令
KEYS pattern  查找 key(所有 keys *, 部分keys xx?)
DEL key  删除 key
DUMP key  返回 key 序列化的值
EXISTS key  检查 key 是否存在
MOVE key db  移动 key
EXPIRE key seconds  为 key 设置过期时间
PERSIST key  移除 key 的过期时间
TTL key  返回 key 的剩余生存时间(秒s)(TTL, time to live)
RANDOMKEY 随机返回一个 key
RENAME key newkey 修改 key 的名称
RENAMENX key newkey 仅当 newkey 不存在时,将 key 改名为 newkey
TYPE key 返回 key 类型
flushdb //删除当前数据库中的所有Key
flushall //删除所有数据库中的key
Redis string字符串 命令
SET key value 设置值
GET key  获取值
GETSET key value 获取旧值,设置新值
SETRANGE key offset value 覆写字符串值
GETRANGE key start end 返回子字符串
MSET key value [key value ...] 同时设置多个值
MGET key1 [key2..] 获取多个值
SETEX key seconds value  设置值和过期时间(秒s)
SETNX key value  不存在时设置值
MSETNX key value [key value ...]  同时设置多个值,当且仅当所有key都不存在
INCR key 增一
DECR key  减一
INCRBY key increment  加值
DECRBY key decrement 减值
INCRBYFLOAT key increment  加浮点值
STRLEN key  返回长度
APPEND key value  末尾追加
Redis hash哈希 命令
HSET key field value 设置字段值
HGET key field 获取字段的值
HMSET key field1 value1 [field2 value2 ] 设置多个字段的值
HMGET key field1 [field2] 获取多个字段的值
HSETNX key field value 不存在时,设置字段的值
HGETALL key 获取所有字段和值
HKEYS key 获取所有字段
HVALS key 获取所有值
HLEN key 获取字段的数量
HDEL key field1 [field2] 删除多个字段
HEXISTS key field 查看字段是否存在
HINCRBY key field increment 字段加值
HINCRBYFLOAT key field increment 字段加浮点值
Redis list列表命令
LPUSH key value1 [value2]  头部插入
RPUSH key value1 [value2]  尾部插入
LPOP key 头部弹出
RPOP key 尾部弹出
LSET key index value 设置值
LINSERT key BEFORE|AFTER pivot value  插入元素
LINDEX key index  获取元素
LRANGE key start stop 获取多个元素(全部 0 -1)
LREM key count value  移除元素(count:>0从前往后,=0所有,<0从后往前)
LLEN key  获取长度
LTRIM key start stop 修剪,保留区间
LPUSHX key value  插入到已存在的列表头部
RPUSHX key value  插入到已存在的列表尾部
BLPOP key1 [key2 ] timeout 头部弹出,没有会阻塞
BRPOP key1 [key2 ] timeout 尾部弹出,没有会阻塞
RPOPLPUSH source destination 弹出一个值,插入到另外一个列表中并返回
BRPOPLPUSH source destination timeout 弹出一个值,插入到另外一个列表中并返回,如果没有会阻塞
Redis set集合命令
SADD key member1 [member2] 添加成员
SREM key member1 [member2] 移除成员
SCARD key 获取成员数
SMEMBERS key 所有成员
SISMEMBER key member 成员检查
SRANDMEMBER key [count] 随机返回
SPOP key 随机弹出
SMOVE source destination member 移动
SDIFF key1 [key2] 差集
SINTER key1 [key2] 交集
SUNION key1 [key2] 并集
SDIFFSTORE destination key1 [key2] 差集并存储
SINTERSTORE destination key1 [key2]  交集并存储
SUNIONSTORE destination key1 [key2] 并集存储 
Redis sorted set有序集合命令
ZADD key score1 member1 [score2 member2] 添加成员
ZCARD key 获取成员数
ZSCORE key member 成员分数值
ZRANK key member 成员索引
ZREVRANK key member 成员的排名,分数值递减(从大到小)排序
ZCOUNT key min max 分数区间的成员数
ZLEXCOUNT key min max 字典区间内成员数
ZINCRBY key increment member 增加分数值
ZREM key member [member ...] 移除成员
ZREMRANGEBYLEX key min max 移除字典区间成员
ZREMRANGEBYRANK key start stop 移除排名区间成员
ZREMRANGEBYSCORE key min max 移除分数区间成员
ZRANGE key start stop [WITHSCORES] 索引区间成员
ZRANGEBYLEX key min max [LIMIT offset count]  字典区间成员
ZRANGEBYSCORE key min max [WITHSCORES] [LIMIT] 分数区间成员
ZREVRANGE key start stop [WITHSCORES] 索引区间成员,分数从高到底
ZREVRANGEBYSCORE key max min [WITHSCORES] 分数区间内成员,分数从高到低排序
ZINTERSTORE destination numkeys key1 [key2...]  交集并存储
ZUNIONSTORE destination numkeys key [key ...] 并集并存储
Redis HyperLogLog 命令
PFADD key element [element ...] 添加元素
PFCOUNT key [key ...] 返回基数估算值
PFMERGE destkey sourcekey [sourcekey ...] 合并
Redis 发布订阅命令
SUBSCRIBE channel [channel ...] 订阅频道
UNSUBSCRIBE [channel [channel ...]] 退订频道
PUBLISH channel message 发送信息
PUBSUB subcommand [argument] 查看订阅与发布系统状态 channels
PSUBSCRIBE pattern [pattern ...]  订阅模式频道
PUNSUBSCRIBE [pattern] 退订模式频道
Redis 事务命令
阶段: 开始事务 -> 命令入队 -> 执行事务

MULTI 标记一个事务块的开始
EXEC 执行所有事务块内的命令
DISCARD 取消事务
WATCH key [key ...] 监视key ,如果改动,那么事务将被打断
UNWATCH 取消 WATCH 命令对所有 key 的监视
Redis Lua脚本命令
EVAL script numkeys key [key ...] arg [arg ...] 执行脚本
EVALSHA sha1 numkeys key [key ...] arg [arg ...] 执行脚本
SCRIPT EXISTS script [script ...] 是否在缓存
SCRIPT FLUSH 移除所有脚本
SCRIPT KILL 杀死运行的脚本
SCRIPT LOAD script 将脚本添加到缓存中,但并不立即执行这个脚本
Redis 服务器命令
CLIENT SETNAME connection-name 设置当前连接的名称
CLIENT GETNAME 获取连接的名称
CLIENT LIST 获取连接到服务器的客户端连接列表
CLIENT KILL [ip:port] [ID client-id] 关闭客户端连接
CLIENT PAUSE timeout 在指定时间内终止运行来自客户端的命令
DBSIZE 返回当前数据库的 key 的数量
FLUSHDB 删除当前数据库的所有key
FLUSHALL 删除所有数据库的所有key
COMMAND 获取 Redis 命令详情数组
COMMAND COUNT 获取 Redis 命令总数
COMMAND GETKEYS 获取给定命令的所有键
TIME 返回当前服务器时间
COMMAND INFO command-name [command-name ...] 获取指定 Redis 命令描述的数组
CONFIG SET parameter value 修改 redis 配置参数,无需重启
CONFIG GET parameter 获取指定配置参数的值
CONFIG REWRITE 对启动 Redis 服务器时所指定的 redis.conf 配置文件进行改写
CONFIG RESETSTAT 重置 INFO 命令中的某些统计数据
DEBUG OBJECT key 获取 key 的调试信息
DEBUG SEGFAULT 让 Redis 服务崩溃
INFO [section] 获取 Redis 服务器的各种信息和统计数值
LASTSAVE 返回最近一次 Redis 成功将数据保存到磁盘上的时间,以 UNIX 时间戳格式表示
MONITOR 实时打印出 Redis 服务器接收到的命令,调试用
ROLE 返回主从实例所属的角色
SHUTDOWN [NOSAVE] [SAVE] 异步保存数据到硬盘,并关闭服务器
CLUSTER SLOTS 获取集群节点的映射数组
SLAVEOF host port 将当前服务器转变为指定服务器的从属服务器(slave server)
SLOWLOG subcommand [argument] 管理 redis 的慢日志
SYNC 用于复制功能(replication)的内部命令
SAVE 同步保存数据到硬盘
BGSAVE 在后台异步保存当前数据库的数据到磁盘
BGREWRITEAOF 异步执行一个 AOF(AppendOnly File) 文件重写操作
Redis 数据备份与恢复
数据备份 
    SAVE
    BGSAVE

恢复数据
    CONFIG GET dir  获取 redis 目录
    将备份文件 (dump.rdb) 移动到 redis 安装目录并启动服务即可
    如果不能恢复需要先将 dump.rdb 文件拷贝到其他地方,再拷贝回备份目录
持久化
	RDB 指定时间间隔,数据快照写入磁盘 SAVE
	AOF 日志形式记录  appendonly - >yes
Redis 安全
CONFIG get requirepass  查看是否设置密码
CONFIG set requirepass password 设置密码
AUTH password 验证
Redis 性能测试
redis-benchmark [option] [option value] 性能测试
Redis 客户端连接
config get maxclients 最大连接数
Redis管道技术
命令一次性向 redis 服务提交,并最终一次性读取所有服务端的响应
管道技术最显著的优势是提高了 redis 服务的性能