配置mysql服务的高可用

一、总括:
1.本配置共有两个测试节点node1.magedu.com 和node2.magedu.com,IP地址分别为172.16.24.2和172.16.24.3
2.单独在一台机器上创建mysql的共享存储,IP地址为172.16.24.1,为其建立一个逻辑卷,并自动挂载至一个目录,并使用共享存储nfs将此目录共享出去。
3.在正常工作的时候,node1节点处于运行状态,一旦node1节点宕机,node2节点能够马上顶替,实现高可用的集群。
二、配置前端准备工作:
1、首先确保node1节点和node2节点的主机名保持一致
(1)在node1节点上作如下操作:
#hostname node1.magedu.com
#vim /etc/sysconfig/network             --在配置文件中修改主机名
将hostname改为:node1.magedu.com
确保使用#hostname 和#uname -n 显示的主机名称一致.
所有节点的主机名称和对应的IP地址解析服务可以正常工作,且每个节点的主机名称需要跟"uname -n"命令的结果保持一致,要作如下操作:
#vim /etc/hosts
172.16.24.2 node1.magedu.com node1
172.16.24.2 node2.magedu.com ndoe2 
(2)在node2节点上作如下操作:
#hostname node2.magedu.com
#vim /etc/sysconfig/network             --在配置文件中修改主机名
将hostname改为:node2.magedu.com
确保使用#hostname 和#uname -n 显示的主机名称一致.
(3)设定两个节点可以基于密钥进行ssh通信,这可以通过类似如下的命令实现:
Node1:
# ssh-keygen -t rsa
# ssh-copy-id -i .ssh/id_rsa.pub root@node2
 
Node2:
# ssh-keygen -t rsa
# ssh-copy-id -i  .ssh/id_rsa.pub root@node1
(4).将node1节点中的/etc/hosts文件拷贝到node2上,随便验证ssh互信是否成功。
在node1上:
#scp /etc/hosts node2:/etc   --拷贝成功,则双机互信建立成功。
确保node1节点的系统时间和node2节点的系统时间保持一致,以免发生不必要的错误!
三、具体配置实现过程
基于nfs的共享存储,要保node1和node2节点的mysql的ID号是一样的。
1、在172.16.24.1主机上建立nfs共享存储:
先分区,为mysql专门建立一个逻辑卷,让其自动挂载至/mydata目录之下(此过程不再给出),然后创建mysql用户
#groupadd -r -g 306 mysql             --指定mysql这个系统用户的ID为306
#useradd -g mysql -u 306 -r -s /sbin/nologin mysql 
#chown -R mysql.mysql /mydata
将/mysql目录共享给172.16.24.2和172.16.24.3主机:
#vim /etc/exports
/mydata   172.16.0.0/16(rw,root_no_squash)
 
#service nfs start
#rpcinfo -p localhost      --查看nfs启动状况
#chkconfig nfs on          --让nfs开机自动启动
  
#showmount -e 172.16.24.1  --查看本机都共享了哪些文件系统
 
二、在node1.magedu.com上配置:
#groupadd -r -g 306 mysql
#useradd -g mysql -r -u 306 mysql
 
#mkdir /mydata
chown -R mysql.mysql /mydata
#showmount -e 172.16.24.1             --查看172.16.24.1主机上共享了哪些文件系统
#mount -t nfs 172.16.24.1:/mydata /mydata
#mount                                --查看是否挂载成功
#su - mysql 
#cd /mydata
#mkdir mydata
在node1.magedu.com服务器上安装mysql服务
 
首先下载mysql软件包到本地,然后解压安装:此处使用的mysql是mysql-5.5.20
#tar xf mysql-5.5.20-linux2.6-i686.tar.gz -C /usr/local
#cd /usr/local
#ln -sv  mysql-5.5.20-linux2.6-i686 mysql
#cd mysql
#chown -R mysql.mysql .
 
#scripts/mysql_install_db --user=mysql --datadir=/mydata/data
#cp support-files/my-large.conf  /etc/my.cnf
#vim /etc/my.cnf
修改文件中的thread_concurrency的值为你的CPU个数乘以2,如:
thread_concurrency = 2
并在thread_concurrency下面添加mysql的数据文件存放路径:
datadir=/mydata/data
 
#cp support-files/mysql.server /etc/rc.d/init.d/mysqld
#chown -R root . 
#chkconfig --add mysqld
#chkconfig --list mysqld
#chkconfig mysqld off
 
#vim /etc/profile                     -- 添加mysql的环境变量:     
 
PATH=$PATH:/usr/local/mysql/bin      --重新登录后才生效
也可以在命令行中定义:
#export PATH=$PATH:/usr/local/mysql/bin
#vim /etc/man.config                 --添加帮助文档,可以查看mysql的帮助文档
MANPATH /usr/local/mysql/man
 
#echo '/usr/local/mysql/lib' > /etc/ld.so.conf.d/mysql.conf     --输出mysql的库文件给系统库查找路径
 
#service mysqld start             
 
#cd /mydata/data                   --启动mysql,查看/mydata/data目录下是否有数据库的相关信息
 
#scp mysql-5.5.20-linux2.6-i686.tar.gz node2:/root  
#scp /etc/my.cnf node2:/etc
 
#service mysqld stop
 
三、在node2.magedu.com上配置
#groupadd -r -g 306 mysql
#useradd -g mysql -r -u 306 mysql
#mkdir /mydata
#mount -t nfs 172.16.24.1:/mydata /mydata/
 
#chown -R mysql.mysql /mydata
 
#tar xf  mysql-5.5.20-linux2.6-i686.tar.gz  -C /usr/local
#cd /usr/local
#ln -sv mysql-5.5.20-linux2.6-i686 mysql 
#cd mysql
#chown -R mysql.mysql .
注意:mysql已经在node1节点上安装过了,在node2节点上不必再安装!!!
#cp support-files/mysql.server /etc/rc.d/init.d/mysqld
#chown -R root . 
#chkconfig --add mysqld
#chkconfig --list mysqld
#chkconfig mysqld off
 
添加环境变量:
PATH=$PATH:/usr/local/mysql/bin      --重新登录后才生效
也可以在命令行中定义:
#export PATH=$PATH:/usr/local/mysql/bin
添加帮助文档:
#vim /etc/man.config
MANPATH /usr/local/mysql/man
输出mysql的库文件给系统库查找路径:
#echo '/usr/local/mysql/lib' > /etc/ld.so.conf.d/mysql.conf
 
现在可以启动mysql进行测试了,但要确保mysql服务已经在node1上关闭了!
 
四、再回到node1上进行安装配置corosync服务
 
下载软件包至本地:
cluster-glue
cluster-glue-libs
heartbeat
openaislib
resource-agents
corosync
heartbeat-libs
pacemaker
corosynclib
libesmtp
pacemaker-libs
下载地址:http://clusterlabs.org/rpm/。请根据硬件平台及操作系统类型选择对应的软件包;这里建议每个软件包都使用目前最新的版本。
 
使用如下命令安装:确保事先已经配置好yum源。
# yum -y --nogpgcheck localinstall *.rpm
 
4、配置corosync,(以下命令在node1.magedu.com上执行)
 
#cd /etc/corosync
#cp corosync.conf.example corosync.conf
 
接着编辑corosync.conf,添加如下内容:
totem { 
         version: 2
         secauth:off                          --是否做安全认证的,如果要做安全认证可以修改为secauth:on 
         threads: 0                           --启用的线程数,一般和CPU数保持一致
         interface {
                   ringnumber: 0
                   bindnetaddr: 172.16.0.0    --网络地址,和网卡保持一致,这里也可以直接写成提供web服务的地址为172.16.24.100
                   mcastaddr: 226.94.24.1   
                   mcastport: 5405
          }
}
.
.
.
 
service {
ver:  0
name: pacemaker
use_mgmtd: yes
}
 
aisexec {
user: root
group:  root
}
 
并设定此配置文件中 bindnetaddr后面的IP地址为你的网卡所在网络的网络地址,这里的两个节点在172.16.0.0网络,因此这里将其设定为172.16.0.0;如下
bindnetaddr: 172.16.0.0
 
生成节点间通信时用到的认证密钥文件:
# corosync-keygen
 
将corosync.conf和authkey复制至node2:
# scp -p corosync.conf  authkey  node2:/etc/corosync/
 
分别为两个节点创建corosync生成的日志所在的目录:
# mkdir /var/log/cluster
# ssh node2  'mkdir /var/log/cluster'
 
5、尝试启动,(以下命令在node1上执行):
 
# service corosync start
 
#ssh node2 'service corosync start'  --确保corosync在node1和node2上都能正行启动。如果能正常启动,会显示如下图所示信息:

配置资源:
#crm
crm(live)configure# property stonith-enabled=false         --关闭stonith
crm(live)configure# verify
crm(live)configure# property no-quorum-policy=ignore       --设置不够法定票数是的处理机制,此处设置为ignore忽略
crm(live)configure# rsc_defaults resource-stickiness=100   --设置资源黏性值
crm(live)configure# verify
crm(live)configure# commit
将MyIp定义为资源:
crm(live)configure# permitive MyIp ocf:heartbeat:IPaddr
crm(live)configure# commit
crm(live)configure#show   --查看定义的资源信息
#umount /mydata
 
在node2上,也卸载/mydata目录:
#umount /mydata
 
将nfs文件系统定义为高可用资源:
#crm configure
crm(live)configure# permitive mynfs ocf:heartbeat:Filesystem params device="172.16.24.1:/mydata" directory="/mydata" fstype="nfs" 
op start timeout=60 op stop timeout=60
crm(live)configure#commit
crm(live)configure#show
 
#crm status     --此时mynfs资源在node2节点上(也可能在node1节点上,视情况而定),在node2上查看信息,如下图所示:并且已经自动将172.16.24.1的/mydata目录挂载至了node2的/mydata目录之下!

如果将node2节点处于standby状态,那么定义的mynfs资源就会流入到node1节点上。而此时如果再让node2节点上线(online),所有资源依然会留在node1上,因为我们前面定义了资源黏性,node1和node2都是100.
 
配置mysqld服务资源:
#crm configure
crm(live)configure#primitive mysqld lsb:mysqld
crm(live)configure#colocation mysqld-with-mynfs inf: mysqld mynfs MyIp   --定义排列约束,让mysqld和mynfs、MyIp 资源要保持在一起,不能分离。
crm(live)configure#order mysqld-after-myip inf: MyIp mysqld              --定义顺序约束,mysqld要晚于MyIp启动
crm(live)configure#order mysqld-after-mynfs inf: mynfs mysqld:start      --定义顺序约束,mysqld要在mynfs启动之后再启动
crm(live)configure#verify
crm(live)configure#commit
crm(live)configure#show     --查看定义的资源和约束信息(也可以使用show xml 以html格式显示的资源信息),如下图所示:

#crm status            --此时我们查看节点的状态和资源的启动次序,如下图所示:

注:以上配置内容没有使用stonith设备,所以node1和node2仍然不能同时向数据库写入数据!