5.模拟心跳down机实验以及恢复

5.1 在目前主机上面建立crontab任务

问题：drbd脑裂问题，当心跳线断掉的时候，两个节点同时可以对外提供服务，通过corosync管理服务机制出现问题，双方都对外提供服务，会导致最终数据产生不一致。
按照上面实验filer01作为主机对外提供服务，在filer01上面添加crontab任务，当检测到自己网卡down掉，或者是心跳线出现问题，在验证属于自己问题后，将集群服务停掉，自动退出集群节点。

[root@filer01 ~]# cat drbd.sh

#!/bin/bash

#env > /root/bbb

/sbin/ifconfig | grepeth1

if [ $? = 0 ]

then

 echo " $(date +%F/%H:%M) : eth1 OK"

else

 echo "$(date +%F/%H:%M): eth1 down ,stop service" >> /root/fail.txt

 pkill corosync

fi

ping -c1192.168.11.223 &> /dev/null

if [ $? = 0 ]

then

 echo " $(date +%F/%H:%M) : ping OK"

else

 ping -c1 192.168.11.1 &> /dev/null

 if [ $? = 0 ]

 then

      echo "$(date +%F/%H:%M) : ping 11.1OK 223 failed" >> /root/alter.txt

 else

     echo"$(date +%F/%H:%M): ping failed , stop service " >> /root/fail.txt

     pkillcorosync

 fi

fi

添加到crontab，时时检测问题。

[root@filer01 ~]#crontab -l

* * * * * sh/root/drbd.sh &


5.2 进行filer01 down机实验


在filer01上面down掉网卡，通过检测到网卡down之后。
[root@filer01 ~]#ifdown eth1
Filer01会自动关闭corosync服务，脱离集群，这个时候通过
查看openfiler时正常对外提供服务的，一直ping 虚拟IP（192.168.10.248）也查看到没有超时的状况，符合我们本来的需求。
当filer01恢复的时候，需要重新添加到集群里面。
以下操作需要在filer01上面执行：
首先设置filer01作为备机出现
[root@filer01 ~]# drbdadm secondary all（在drbd.conf中设置的名称,可以用all）
[root@filer01 ~]# drbdadm disconnect all   （备机断掉可以用all）
[root@filer01 ~]# drbdadm ----discard-my-data connect all  （同步数据连接上）
现在查看drbd的状态会发现时 diskless/uptodate 解决diskless需要运行下面命令
[root@filer01 ~]#  drbdadmattach all（解决diskless问题）
[root@filer01 ~]# drbdadm invalidate all（从头重新同步数据，这个持续时间会很长）
通过以上恢复步骤，filer01会重新添加进来，然后记住手动启动起来corosync服务

然后主备的身份完成切换了，如果需要更换回到filer01，需要手动将filer02的网卡down掉按照上述过程重新切换回去即可。