性能容量关键指标:
每秒tps,峰值tps
基础数据量,日均增长数据量
最大连接数
内存分配
IOPS
重点关注指标:
业务指标:
每秒并发用户请求、每秒订单数、用户请求响应时长
折算成性能指标:
qps、tps、rt
提出测试预期目标:
根据性能指标制定测试方案
测试结果尽可能以这些指标来表达
业务预期指标解读
读写比例:读多写少、读少写多、读写相当、统计为主、纯写入为主
存盘模式(数据可靠性要求):实时、异步、不关注
用户端的语言、字符编码(latin1、utf8、utf8mb4)
数据恢复实时性要求
日新增数据量
数据库连接方式
历史数据归档方式
业务平均、峰值指标
业务目标评估要点
服务器配置
存储引擎选择
数据库高可用方案
数据可用性方案
数据库备份方案
相应优化方案:
CPU,更换更好、更多核心的CPU
I/O,更换IOPS性能更高的设备,例如SSD,PCIE SSD
内存,增加内存,合理分配
MySQL,升级版本
选择InnoDB引擎,并且设计合适的表结构,避免锁竞争
建立性能基线
某个运行时刻的状态记录、快照
中位线 or 均线
用于和未来的状态进行对比
未来时刻产生关键事件后的新状态,作为下一个基线
系统性能指标:
CPU、内存、I/O
MySQL性能指标:
tps、qps、DMLs、响应时长、内存利用率、锁等待
业务指标
每秒业务量、每次交易时长
采集工具:
top、free、vmstat、sar、iostat、dstat、nmon、oradba.pl等
CPU:%user、%idle、%sys、%iowait
%user (<10%)、%idle (>80%)、%sys (<5%)、%iowait (<10%)
IO:tps/iops、await、svctm、%util
tps/iops (越大越好)、await (<5~10)、svctm (<5)、%util (<50%)
内存:free (free、buffers、cached)、used,以及swap
used非常高,但cached非常低,要引起关注了,可能发生内存泄漏
MySQL
tps越大越好、rt越小越好、lock越少越好、hit ratio越高越好、waits越少越好
table_locks_wait,innodb_log_waits,innodb_buffer_pool_wait_free大于0说明负载很大
压力测试
基准压力测试目的:
采购新设备,评估新设备性能
开发新项目,评估数据库容量
新系统上线前,预估/模拟数据库负载
更换数据库版本,评估性能变化
设计测试模型要点:
明确测试的核心目标、诉求
排除干扰,专注测试目的
确定测试环境
确定测试过程中的衡量和变量
保证测试结果的可重复性
设计压测模型注意事项:
只在本地加压
压测数据量小
压测时间过短
压测模式太少
压力负载过大或过小
每轮测试完毕要净化环境
MySQL数据预热:
5.6以前,执行一次mysqldump,或全量select
5.6以后,buffer bool dump & restore
常用压测工具介绍:
tpcc-mysql、sysbench、fio
测试方法,结果解读:
MySQL压力测试基准值
测试结果模板
测试报告编写
压测client、server分开
压测数据量、时长、并发量过大过小都不合适
压测结果除了TPS/TPmC,也要关注性能数据
利用压测发现性能瓶颈因素
系统性能瓶颈大概率发生在磁盘I/O层
相应的优化措施,大多数靠加索引