Percona Server 的安装及tokudb引擎的安装笔记
2017年7月7日
安装percona server:
yum localinstall Percona-Server-client-57-5.7.18-15.1.el6.x86_64.rpm Percona-Server-shared-57-5.7.18-15.1.el6.x86_64.rpm Percona-Server-server-57-5.7.18-15.1.el6.x86_64.rpm Percona-Server-tokudb-57-5.7.18-15.1.el6.x86_64.rpm
安装过程中,会自动安装jmelloc组件。
/etc/my.cnf 内容如下:
[client]
port = 3306
socket = /tmp/mysql.sock
[mysqld]
port = 3306
socket = /tmp/mysql.sock
datadir = /var/lib/mysql
innodb_file_per_table=ON
character-set-server = utf8
server_id=1000
join_buffer_size = 256K
thread_stack = 256K
default_storage_engine = InnoDB
max_connections = 2000
#slave-skip-errors = 1032,1062
#性能相关调节
#跳过外部锁定,用于多进程条件下为MyISAM数据表进行锁定
skip-external-locking
sort_buffer_size = 4M
read_buffer_size = 4M
read_rnd_buffer_size = 4M
myisam_sort_buffer_size = 64M
#自适应哈希索引,在高并发复杂sql场景下有可能引发系统资源不足,大量spin waits ,lock waits 锁等待,导致崩溃
skip-innodb_adaptive_hash_index
#为所有线程打开表的数量
table_open_cache = 2048
#索引块的缓冲区大小
key_buffer_size = 128M
#MySQL查询结果缓冲区的大小
query_cache_type = OFF
query_cache_size = 0
#处理大的信息包量
max_allowed_packet = 16M
#1G=>8 2G=>16 3G=>32 >3G=>64
#缓存可重用的线程数
thread_cache_size = 64
event_scheduler = 1
long_query_time = 1
slow_query_log=1
slow_query_log_file = /var/lib/mysql/log-slow-queries.log
log-error = /var/lib/mysql/error.log
max_binlog_size = 256m
transaction_isolation = READ-COMMITTED
#innodb_io_capacity=1000
master_info_repository = TABLE
relay_log_info_repository = TABLE
relay_log_recovery = 1 #crash safe
log-bin=mysql-bin
binlog_format=row
sync_binlog =1
log-slave-updates
log_bin_trust_function_creators = 1
binlog_rows_query_log_events=ON
expire_logs_days = 5
auto_increment_increment=1
auto_increment_offset=1
skip-slave-start
skip-name-resolve
binlog_cache_size = 16M
binlog_stmt_cache_size=16M
########innodb settings########
innodb_buffer_pool_instances = 4 #小于逻辑CPU个数,尽可能调大一点
innodb_log_buffer_size = 16777216
innodb_read_io_threads = 4 #小于逻辑CPU个数/2,尽可能调大一点
innodb_write_io_threads=4 # <=(逻辑CPU个数 -read_io_threads) ,尽可能调大一点
innodb_purge_threads = 2
innodb_flush_method=O_DIRECT
# Timeout
connect_timeout = 20
wait_timeout = 14400
interactive_timeout = 14400
net_write_timeout = 180
lock_wait_timeout = 120
tmp_table_size=200M
max_heap_table_size=200M
sql_mode = 'NO_ENGINE_SUBSTITUTION,NO_AUTO_CREATE_USER'
[mysqldump]
quick
max_allowed_packet = 16M
[mysql]
no-auto-rehash
# Remove the next comment character if you are not familiar with SQL
#safe-updates
prompt ='[\\u@\\h:\\d] >'
[myisamchk]
key_buffer_size = 512M
sort_buffer_size = 512M
read_buffer = 8M
write_buffer = 8M
[mysqlhotcopy]
interactive-timeout
初始化数据库:
/usr/sbin/mysqld --initialize-insecure --basedir=/usr/sbin/ --user=mysql --datadir=/var/lib/mysql/
# 说明:使用 --initialize-insecure参数,不让mysqld初始化时候生成随机密码,保持空密码
启动数据库:
/etc/init.d/mysql start
设置数据库密码:
mysql
> set password=PASSWORD('Abcd@1234');
> flush privileges;
> exit
然后,开始安装tokudb引擎:
官方详细的安装步骤: https://www.percona.com/doc/percona-server/5.7/tokudb/tokudb_installation.html
1 禁用Transparent huge pages
cat /sys/kernel/mm/transparent_hugepage/enabled
[always] madvise never
always代表已启用
echo never > /sys/kernel/mm/transparent_hugepage/enabled
echo never > /sys/kernel/mm/transparent_hugepage/defrag
# 将设置写入到文件,防止重启配置丢失
echo 'echo never > /sys/kernel/mm/transparent_hugepage/enabled' >> /etc/rc.local
echo 'echo never > /sys/kernel/mm/transparent_hugepage/defrag' >> /etc/rc.local
2、安装并启用tokudb引擎:
## 可以使用INSTALL PLUGIN方法安装,也可以使用ps_tokudb_admin这个工具进行配置(推荐使用ps_tokudb_admin)
执行 ps_tokudb_admin -uroot -pAbcd@1234 --enable
会自动在 /etc/my.cnf 在加入下面的1行配置
[mysqld_safe]
thp-setting=never
然后再执行 ps_tokudb_admin -uroot -pAbcd@1234 --enable-backup
会自动在 /etc/my.cnf 在加入下面的1行配置
[mysqld_safe]
preload-hotbackup
这样就完成了TokuDB engine plugin和TokuBackup plugin插件的安装。
重启mysqld进程。
/etc/init.d/mysql restart
mysql -uroot -pAbcd@1234
> show engines;
> show plugins;
> SELECT @@tokudb_version;
都可以看到tokudb启用了。
这样的话,我们重启了mysqld或者整个服务器的话,tokudb引擎也能在mysql重启时候再次自动加载。
安装好tokudb引擎后,我们还可以自定义tokudb的参数在/etc/my.cnf里面。例如下面的2行:
### tokudb settings ########
tokudb_cache_size = 5G # 这个参数根据自己服务中可能使用到tokudb引擎的表数量来设置
tokudb_row_format=tokudb_zlib # 设置默认tokudb行格式,有tokudb_zlib 和 tokudb_lzma
此外,还有些tokudb特有的配置参数,可以补充到/etc/my.cnf 里面,例如下面的部分配置:
#TokuDB的行模式,建议用 FAST ,如果磁盘空间很紧张,建议用 SMALL
#tokudb_default: 设置默认的压缩行为。在 TokuDB 7.1.0版本,默认使用zlib 库进行压缩,未来版本可能会改变。
#tokudb_fast: 使用quicklz 库的压缩模式。
#tokudb_small: 使用 lzma 库的压缩模式。
#tokudb_zlib: 使用 zlib 库的压缩模式,提供了中等级别的压缩比和中等级别的CPU消耗。
#tokudb_quicklz: 使用 quicklz 库的压缩模式, 提供了轻量级的压缩比和较低基本的CPU消耗。
#tokudb_lzma: 使用lzma库压缩模式,提供了高压缩比和高CPU消耗。
#tokudb_uncompressed: 不使用压缩模式。
#tokudb_row_format = tokudb_small
tokudb_row_format = tokudb_fast
tokudb_cache_size = 1G ###建议内存的一半
tokudb_commit_sync = 0
tokudb_directio = 1
tokudb_read_block_size = 128K
tokudb_read_buf_size = 128K
optimizer_switch = 'mrr=on,mrr_cost_based=off'
tokudb-data-dir = /mydata/3306/tokudbData
tokudb-log-dir = /mydata/3306/tokudbLog