一款优秀的缓存系统

memcache 本身是一款分布式的高速缓存系统,以 key-value 的形式常驻内存,一般用来做网站或者数据库的缓存使用。

特别是对以下场景非常适合用 memcache 来做缓存:

1. 频繁访问的数据2. 安全性要求比较低的数据

3. 更新比较频繁的小表(用户状态表、物品库存等)


MySQL memcached api MySQL 5.6 —— 开始支持MySQL 5.6 把 memcache 功能以插件形式集成到 MySQL 数据库中,称为 memcached api。这样一来,memcache 的数据以 InnoDB 关系表的形式同步于磁盘,解决了 memcache 的几个问题:1. 解决了 memcache 的数据持久化的问题;2. 可以很方便的以 SQL 语句的形式直接访问 memcache 的数据;

3. 不需要单独安装 memcache,安装 MySQL 即可使用。

MySQL 5.7 —— 深入优化

MySQL 5.7 对 memcached api 做了深入优化,官方数据显示使用 memcached api,在只读的场景中,QPS 提升到 100W。 

MySQL 8.0 —— 新增特性

MySQL 8.0 发布后,又在功能上给 memcached api 增加了两个新特性。1. 批量获取 KEY相比原来一次只能读取一个 Key 来讲,减少了客户端与 MySQL 服务端的数据交互次数。2. 可以对 KEY 进行 RANGE 操作

可以直接类似于 select * from t1 where id between 10 and 20 这样的范围检索语句。


演示下面我们来演示下这两个新的特性,先把 memcached api 插件以及需要的示例表数据准备好。

1. 导入元数据

从 MySQL 相关目录导入 memcached api 元数据(包含配置,容器等)。

(localhost:ytt)<mysql>\. /usr/share/mysql-8.0/innodb_memcached_config.sqlQuery OK, 1 row affected (0.05 sec)

2. 安装插件

第一次需要手动安装 memcached 插件。

(localhost:test)<mysql>INSTALL PLUGIN daemon_memcached soname "libmemcached.so";Query OK, 0 rows affected (0.08 sec)
再次确认 memcached 插件安装成功。
(localhost:information_schema)<mysql>select * from information_schema.plugins where plugin_name = 'daemon_memcached'\G*************************** 1. row ***************************           PLUGIN_NAME: daemon_memcached        PLUGIN_VERSION: 1.0         PLUGIN_STATUS: ACTIVE           PLUGIN_TYPE: DAEMON   PLUGIN_TYPE_VERSION: 80020.0        PLUGIN_LIBRARY: libmemcached.soPLUGIN_LIBRARY_VERSION: 1.10         PLUGIN_AUTHOR: Oracle Corporation    PLUGIN_DESCRIPTION: Memcached Daemon        PLUGIN_LICENSE: GPL           LOAD_OPTION: ON1 row in set (0.00 sec)

3. 准备数据

建立一张示例表 t1。 

注意:表主键对应 memcached api 的 Key,除主键外的其他字段只能整型或者字符类型,剩下的 flags,cas,expiry 是规定死的字段。

(localhost:ytt)<mysql>create table t1 (  id serial primary key,   r1 int,  r2 int,  r3 varchar(20),   flags int,  cas bigint unsigned,   expiry int);Query OK, 0 rows affected (0.05 sec)
目前插入的一些示例数据。
(localhost:ytt)<mysql>select * from t1;+----+------+------+---------------------+-------+------+--------+| id | r1   | r2   | r3                  | flags | cas  | expiry |+----+------+------+---------------------+-------+------+--------+|  1 |    2 |    9 | 2040-01-20 07:29:47 |     0 |    0 |      0 ||  2 |    7 |    1 | 2037-12-25 22:43:52 |     0 |    0 |      0 ||  3 |    2 |   18 | 2049-04-15 07:05:35 |     0 |    0 |      0 ||  4 |    8 |    5 | 2048-08-17 23:38:39 |     0 |    0 |      0 ||  6 |    9 |   11 | 2043-02-13 11:05:28 |     0 |    0 |      0 ||  7 |    2 |    5 | 2049-03-25 20:27:01 |     0 |    0 |      0 ||  8 |    7 |   13 | 2032-12-11 05:21:01 |     0 |    0 |      0 ||  9 |    1 |    7 | 2028-03-29 03:06:18 |     0 |    0 |      0 || 13 |    6 |   12 | 2021-11-22 11:24:06 |     0 |    0 |      0 || 14 |    4 |   20 | 2035-12-14 13:23:55 |     0 |    0 |      0 || 15 |   10 |   15 | 2030-03-24 17:09:34 |     0 |    0 |      0 || 16 |    8 |   15 | 2022-10-21 09:31:45 |     0 |    0 |      0 || 17 |    3 |    3 | 2034-07-20 09:52:18 |     0 |    0 |      0 || 18 |    9 |   19 | 2020-06-25 05:08:37 |     0 |    0 |      0 || 19 |    1 |    7 | 2041-08-29 11:35:06 |     0 |    0 |      0 || 20 |    6 |   14 | 2031-04-25 01:05:20 |     0 |    0 |      0 |+----+------+------+---------------------+-------+------+--------+16 rows in set (0.00 sec)

4. 使用插件

让 memcached 插件能识别表 ytt.t1,插入一条记录到 memcache 容器表。

(localhost:ytt)<mysql>insert into innodb_memcache.containers(    name,     db_schema,     db_table,     key_columns,     value_columns,     flags,     cas_column,     expire_time_column,     unique_idx_name_on_key  ) -> values (    'default',     'ytt',     't1',     'id',     'r1|r2|r3',      'flags',    'cas',    'expiry',    'primary');Query OK, 1 row affected (0.01 sec)

5. 读取数据

重启 memcached 插件,让其识别刚才的数据。

(localhost:ytt)<mysql>UNINSTALL PLUGIN daemon_memcached;Query OK, 0 rows affected (2.02 sec)
(localhost:ytt)<mysql>INSTALL PLUGIN daemon_memcached soname "libmemcached.so";Query OK, 0 rows affected (0.01 sec)
MySQL 5.7 操作 memcached api  ,只可以一次获取单个 key。比如要获取 id 为(1,2,3,4,5,6)的记录,需要重复 get 6 次。
root@ytt-unbuntu:/data/mysql57/data# telnet localhost 11211Trying 127.0.0.1...Connected to localhost.Escape character is '^]'.get 1VALUE 1 0 232|9|2040-01-20 07:29:47ENDget 2VALUE 2 0 237|1|2037-12-25 22:43:52ENDget 3VALUE 3 0 242|18|2049-04-15 07:05:35ENDget 4VALUE 4 0 238|5|2048-08-17 23:38:39ENDget 5ENDget 6VALUE 6 0 249|11|2043-02-13 11:05:28END
想一次性获取多个 KEY,直接报错!
get 1 2 3 4 5 6We temporarily don't support multiple get option.
MySQL 8.0 操作 memcached api, 可以一次性获取多个 Key。比如同样要获取 id 为(1,2,3,4,5,6)的记录,只需要 get 1 次即可。
root@ytt-unbuntu:/home/ytt# telnet localhost 11222Trying 127.0.0.1...Connected to localhost.Escape character is '^]'.
get 1 2 3 4 5 6VALUE 1 0 232|9|2040-01-20 07:29:47VALUE 2 0 237|1|2037-12-25 22:43:52VALUE 3 0 242|18|2049-04-15 07:05:35VALUE 4 0 238|5|2048-08-17 23:38:39VALUE 6 0 249|11|2043-02-13 11:05:28END
也支持范围获取,比如同样 get id 为(1,2,3,4,5,6)的所有记录,只需要 get @<=6 即可:
get @<=6
再次获取 id 大于10 的记录:
get @>10
获取 ID 大于 10 并且小于 20 的记录:
get @>10@<20
不过目前 MySQL 8.0 对 memcache 的范围支持比较简单,只支持最多一个范围,多个范围暂时不支持。
get @>2@<3@<10   END
这样的是没有结果的,MySQL 此时把这个检索变为 id 大于 2 并且小于 "3@<10",这样很明显没有记录。
总结本篇介绍了 MySQL memcached api 使用场景以及在 MySQL 8.0 下新特性使用例子,希望对大家有帮助。