整体上来说,复制大致分为3个步骤:
1. master将数据库的改变记录到二进制日志(binary log)中,这些记录叫做二进制日志事件(binary log
events);
2. slave将master的binary log events dump到它的中继日志(relay log);
3. slave重做中继日志中的事件,将改变反映到它自己的数据。
下图描述了复制的原理:
该过程的第一部分就是master记录二进制日志。在每个事务更新数据完成之前,master在二日志记录这些改变。MySQL将事务串行的写入二进制日志,即使事务中的语句都是交叉执行的。在事件写入二进制日志完成后,master通知存储引擎提交事务。
接下来就是slave将master的binary log拷贝到它自己的中继日志。首先,slave开始一个工作线程——I/O线程。I/O线程在master上打开一个普通的连接,然后开始binlog dump process。Binlog dump process从master的二进制日志中读取事件,如果已经跟上master,它会睡眠并等待master产生新的事件。I/O线程将这些事件写入中继日志。
SQL slave thread(SQL从线程)处理该过程的最后一步。SQL线程从中继日志读取事件,并重放其中的事件而更新slave的数据,使其与master中的数据一致。只要该线程与I/O线程保持一致,中继日志通常会位于OS的缓存中,所以中继日志的开销很小。
此外,在master中也有一个工作线程:和其它MySQL的连接一样,slave在master中打开一个连接也会使得master开始一个线程。复制过程有一个很重要的限制——复制在slave上是串行化的,也就是说master上的并行更新操作不能在slave上并行操作。
以一个实验介绍mysql主从复制的部署过程.
场景介绍:
HostName: Mysql_master IP: 192.168.200.20 Mysql复制主服务器
HostName: Mysql_slave IP: 192.168.200.21 Mysql复制从服务器
Mysql版本: 5.6.19
安装部分:
1. 安装cmake:从mysql5.5版本开始,开始使用cmake
下载链接:http://www.cmake.org/files/v3.0/cmake-3.0.0.tar.gz
cmake安装:
#cmake安装 [root@Master_mysql src]# tar zxvf cmake-3.0.0.tar.gz [root@Master_mysql src]# cd cmake-3.0.0 [root@Master_mysql cmake-3.0.0]# ./bootstrap [root@Master_mysql cmake-3.0.0]# gmake [root@Master_mysql cmake-3.0.0]# make install
2.安装mysql:
[root@Master_mysql ~]# groupadd mysql [root@Master_mysql ~]# useradd -g mysql mysql [root@Master_mysql src]# tar zxvf mysql-5.6.19.tar.gz [root@Master_mysql src]# cd mysql-5.6.19 [root@Master_mysql mysql-5.6.19]# cmake . [root@Master_mysql mysql-5.6.19]# make [root@Master_mysql mysql-5.6.19]# make install [root@Master_mysql mysql-5.6.19]# cd /usr/local/mysql/ [root@Master_mysql mysql]# chown -R mysql:mysql . [root@Master_mysql mysql]# scripts/mysql_install_db --user=mysql & [root@Master_mysql mysql]# chown -R root:root . [root@Master_mysql mysql]# chown -R mysql:mysql data [root@Master_mysql mysql]# bin/mysqld_safe --user=mysql & [root@Master_mysql mysql]# cp support-files/mysql.server /etc/init.d/
在Mysql主从服务器上分别执行上诉安装过程.
配置部分:
主数据库服务器配置
修改主数据库服务器配置文件my.cnf:
#增加如下: [mysqld] server_id = 1 log_bin = mysql-binlog #二进制日志名称前缀
启动Mysql服务:
[root@Master_mysql mysql]# /etc/init.d/mysql.server start
主服务器上创建授权账号并获取二进制文件和位置:
#复制权限 mysql> grant replication slave on *.* to 'replica'@'192.168.200.21' identified by 'replicapass'; Query OK, 0 rows affected (0.00 sec) mysql> flush privileges; Query OK, 0 rows affected (0.10 sec) #锁表 mysql> flush tables with read lock; Query OK, 0 rows affected (0.01 sec) # mysql> show master status\G *************************** 1. row *************************** File: mysql-binlog.000015 Position: 413 Binlog_Do_DB: Binlog_Ignore_DB: Executed_Gtid_Set: 1 row in set (0.00 sec) # mysql> unlock tables; Query OK, 0 rows affected (0.04 sec)
此处主要用来获取File 文件名称、Postition 位置,之后从服务器配置change master to时需要
指定此处获取的内容.
2. 从数据库服务器配置:
修改从数据库服务器配置文件my.cnf:
#增加如下: server_id = 2 log_bin = mysql-binlog relay_log = mysql-relaylog #(中继日志名称前缀) log_slave_updates = 1 #(slave重做中继日志内容并写入到log_bin指定的二进制日志文件)
普通的从数据库服务器是不需要启用二进制日志的,但在某些特殊情况下,必须启用二进制日志。比
如:某个从服务器同时作为其他数据库服务器的主、或者希望日常备份在从库上执行等。 开启二进制
日志后,需要同时开启log_slave_updates参数,如果不启用,二进制日志文件则不会有内容.
启动Mysql服务:
[root@Slave_mysql mysql]# /etc/init.d/mysql.server start
设置复制并启动复制:
# mysql> change master to master_host='192.168.200.20', -> master_user='replica', -> master_password='replicapass', -> master_log_file='mysql-binlog.000015', -> master_log_pos=413, -> master_connect_retry=10; Query OK, 0 rows affected, 2 warnings (0.08 sec) # mysql> start slave; Query OK, 0 rows affected (0.03 sec)
从服务器上查看复制状态:
# mysql> show slave status\G *************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: 192.168.200.20 Master_User: replica Master_Port: 3306 Connect_Retry: 10 Master_Log_File: mysql-binlog.000015 Read_Master_Log_Pos: 413 Relay_Log_File: mysql-relaylog.000002 Relay_Log_Pos: 286 Relay_Master_Log_File: mysql-binlog.000015 Slave_IO_Running: Yes Slave_SQL_Running: Yes Replicate_Do_DB: Replicate_Ignore_DB: Replicate_Do_Table: Replicate_Ignore_Table: Replicate_Wild_Do_Table: Replicate_Wild_Ignore_Table: Last_Errno: 0 Last_Error: Skip_Counter: 0 Exec_Master_Log_Pos: 413 Relay_Log_Space: 458 Until_Condition: None Until_Log_File: Until_Log_Pos: 0 Master_SSL_Allowed: No Master_SSL_CA_File: Master_SSL_CA_Path: Master_SSL_Cert: Master_SSL_Cipher: Master_SSL_Key: Seconds_Behind_Master: 0 Master_SSL_Verify_Server_Cert: No Last_IO_Errno: 0 Last_IO_Error: Last_SQL_Errno: 0 Last_SQL_Error: Replicate_Ignore_Server_Ids: Master_Server_Id: 1 Master_UUID: e84592e0-0e5b-11e4-a5d3-000c29e88022 Master_Info_File: /usr/local/mysql/data/master.info SQL_Delay: 0 SQL_Remaining_Delay: NULL Slave_SQL_Running_State: Slave has read all relay log; waiting for the slave I/O thread to update it Master_Retry_Count: 86400 Master_Bind: Last_IO_Error_Timestamp: Last_SQL_Error_Timestamp: Master_SSL_Crl: Master_SSL_Crlpath: Retrieved_Gtid_Set: Executed_Gtid_Set: Auto_Position: 0 1 row in set (0.00 sec)
可以看到: Slave_IO_Running和Slave_SQL_Running 状态都是Yes,这说明两个线程都在正常运行,复制
成功执行.
复制验证部分:
主服务器上,登录数据库进行建库操作:
本例创建库temp和表t1
# mysql> create database temp; Query OK, 1 row affected (0.06 sec) # mysql> create table temp.t1( -> number varchar(10) not null, -> name varchar(20), -> birthday date, -> primary key (number) -> ); Query OK, 0 rows affected (0.23 sec) # mysql> insert into temp.t1 -> values('20140805','shizhenning','19860101'); Query OK, 1 row affected (0.07 sec) # mysql> select * from temp.t1; +----------+-------------+------------+ | number | name | birthday | +----------+-------------+------------+ | 20140805 | shizhenning | 1986-01-01 | +----------+-------------+------------+ 1 row in set (0.03 sec)
查询从库服务器复制结果:
mysql> show databases; +--------------------+ | Database | +--------------------+ | information_schema | | mysql | | performance_schema | | temp | | test | +--------------------+ 5 rows in set (0.00 sec) mysql> select * from temp.t1; +----------+-------------+------------+ | number | name | birthday | +----------+-------------+------------+ | 20140805 | shizhenning | 1986-01-01 | +----------+-------------+------------+ 1 row in set (0.00 sec)
可以看到,从库服务器已经复制完成.
对比两台服务器日志:
主服务器执行: mysqlbinlog data/mysql-binlog.000015
从库服务器执行: mysqlbinlog data/mysql-binlog.000002
从库服务器的二进制日志已经有了内容,时间戳和主库二进制保持一致.
这样一个基本的主从复制就部署完成了.