LVS DR+keepalived实现HA+LB

原创

sheep1355 2015-11-22 00:22:28 博主文章分类：LB-HA系统架构 ©著作权

文章标签 LVS-dr 文章分类 负载均衡服务器

©著作权归作者所有：来自51CTO博客作者sheep1355的原创作品，请联系作者获取转载授权，否则将追究法律责任

首先需要4台服务器

2台dir分别是 dirmaster dirslave

2台RS 分别运行nginx测试服务

dir

192.168.186.129

192.168.186.135

192.168.186.130

192.168.186.132

首先搭建LVS-DR服务
a.dir上面安装ipvsadm

yum install ipvsadm

b.更改ipvsadm配置文件

vim /etc/usr/local/sbin/lvs_dr.sh

#! /bin/bash
echo 1 > /proc/sys/net/ipv4/ip_forward #dir服务器行开启路由转发功能
ipv=/sbin/ipvsadm
vip=192.168.186.110
rs1=192.168.186.130
rs2=192.168.186.132

#设置vip

ifconfig eth0:0 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip dev eth0:0
$ipv -C
$ipv -A -t $vip:80 -s rr
$ipv -a -t $vip:80 -r $rs1:80 -g -w 1
$ipv -a -t $vip:80 -r $rs2:80 -g -w 1

两台rs上：vim /usr/local/sbin/lvs_dr_rs.sh
#! /bin/bash
vip=192.168.186.110
ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip lo:0
echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce

c.然后director上执行: bash /usr/local/sbin/lvs_dr.sh
两台rs上执行: bash /usr/local/sbin/lvs_dr_rs.sh
Windows下浏览器测试访问

以上完成后，即可实现RS的负载均衡，每次请求根据权重的设置而分摊

但是如果当某一个RS服务停止时，那么客户端请求依然会直接到停止服务的RS上。

2.增加keepalived服务

注意：前面虽然我们已经配置过一些操作，但是下面我们使用keepaliave操作和之前的操作是有些冲突的，所以若是之前配置过DR，请首先做如下操作：dr上执行：

$ipv -C
ifconfig eth0:0 down

前面的lvs虽然已经配置成功也实现了负载均衡，但是我们测试的时候发现，当某台real server把nginx进程停掉，那么director照样会把请求转发过去，这样就造成了某些请求不正常。所以需要有一种机制用来检测real server的状态，这就是keepalived。它的作用除了可以检测rs状态外，还可以检测备用director的状态，也就是说 keepalived可以实现ha集群的功能，当然了也需要一台备用director.

a.主机和备用机上都要安装上keepalived

yum install -y keepalived

安装好后，编辑配置文件
vim /etc/keepalived/keepalived.conf //加入如下：
vrrp_instance VI_1 {
state MASTER #备用服务器上为 BACKUP
interface eth0
virtual_router_id 51
priority 100  #备用服务器上为90
advert_int 1
authentication {
      auth_type PASS
      auth_pass 1111
}
virtual_ipaddress {
      192.168.186.110
}
}
virtual_server 192.168.186.110 80 {
delay_loop 6                #(每隔10秒查询realserver状态)
lb_algo wlc                #(lvs 算法)
lb_kind DR                #(Direct Route)
persistence_timeout 60       #(同一IP的连接60秒内被分配到同一台realserver)
protocol TCP             #(用TCP协议检查realserver状态)

real_server 192.168.186.130 80 {
      weight 100             #(权重)
      TCP_CHECK {
      connect_timeout 10    #(10秒无响应超时)
      nb_get_retry 3
      delay_before_retry 3
      connect_port 80
      }
}
real_server 192.168.186.132 80 {
      weight 100
      TCP_CHECK {
      connect_timeout 10
      nb_get_retry 3
      delay_before_retry 3
      connect_port 80
      }
   }
}

以上为主director的配置文件，从director的配置文件只需要修改
state MASTER  -> state BACKUP
priority 100 -> priority 90
配置完keepalived后，需要开启端口转发（主从都要做）：
echo 1 > /proc/sys/net/ipv4/ip_forward
然后，两个rs上执行 /usr/local/sbin/lvs_dr_rs.sh 脚本
最后，两个director上启动keepalived服务（先主后从）：
/etc/init.d/keepalived start
另外，需要注意的是，启动keepalived服务会自动生成vip和ipvsadm规则，不需要再去执行上面提到的/usr/local/sbin/lvs_dr.sh 脚本。