artType01.jpg LVS原理详解及部署之五:LVS+keepalived实现负载均衡&高可用

2014-01-15 00:22:13

标签:LVS LVS调度算法 keepalived原理介绍 LVS+keepalived部署

big.png

原创作品,允许转载,转载时请务必以超链接形式标明文章 原始出处 、作者信息和本声明。否则将追究法律责任。http://atong.blog.51cto.com/2393905/1351709

-------------------LVS专题------------------------

LVS原理详解及部署之一:ARP原理准备

LVS原理详解及部署之二:LVS原理详解(3种工作方式8种调度算法)

LVS原理详解及部署之三:手动部署LVS

LVS原理详解及部署之四:keepalived介绍

LVS原理详解及部署之五:LVS+keepalived实现负载均衡&高可用

-------------------------------------------------

本文我们主要讲解的是LVS通过keepalived来实现负载均衡和高可用,而不是我们第三篇文章介绍的通过手动的方式来进行配置。通过脚本的方式来显示RS节点的健康检查和LVS的故障切换。此文会通过一个实例来讲解,本文目录如下:

一、实验环境需求&准备

二、配置keepalived实现负载均衡&高可用


一、实验环境需求&准备

我们这次实验要完成的一个架构如下图所示,我们通过LVS-DR-MASTER,LVS-DR-BACKUP作为LVS负载均衡调度器,并且两者之间通过keepalived来两者之间的HA。keepalived本身就是为了LVS为开发的,所以说我们通过keepalived来进行LVS的配置就显得十分的方便。而且keepalived是直接操作ip_vs不用通过ipvsadm,所以更加方便。

1)实验架构图&需求表:

wKiom1LVC6LwkWadAAGyY4ob04w803.jpg

角色IP地址备注
主LVS调度器(MASTER)192.168.41.181使用keepalived配置
备LVS调度器(BACKUP)192.168.41.251
HTTP服务器(RS1)192.168.41.31apache服务器(一般生产环境需要外网IP地址,这里用内网IP地址替代)
HTTP服务器(RS2)192.168.41.33
虚拟IP地址(VIP)192.168.41.249虚拟IP地址

2)部署http服务器,验证能正常访问

这里就不多费篇幅介绍了,就是要保证http能正常访问。

二、配置keepalived实现负载均衡&高可用

1)安装keepalived软件

wget http://www.keepalived.org/software/keepalived-1.2.8.tar.gz

tar -zxf keepalived-1.2.8.tar.gz

cd keepalived-1.2.8

./configure --prefix=/usr/local/keepalived

make

make install

#配置keepalived的自启动&拷贝keepalived的执行程序

cp /usr/local/keepalived/sbin/keepalived /usr/sbin/

cp /usr/local/keepalived/sbin/keepalived /usr/sbin/

cp /usr/local/keepalived/etc/sysconfig/keepalived /etc/sysconfig/

cp /usr/local/keepalived/etc/rc.d/init.d/keepalived /etc/init.d/

#开启内核的转发功能

vi /etc/sysctl  net.ipv4.ip_forword = 1

2)配置LVS-DR-MASK的keepalived.conf配置文件

! Configuration File for keepalived


global_defs {

  notification_email {

    752119102@qq.com            #设置报警邮箱,一般不再这做,而是用其他方式报警。

  }

  notification_email_from keepalived@localhost   #设定发送邮件地址

  smtp_server 127.0.0.1                          #设定发送邮件服务器

  smtp_connect_timeout 30                        #设定SMTP连接超时时间

  router_id LVS_DEVEL          #查阅说明文档得知route_id配置是为了标识当前节点,我将其设置为NodeA。当然两个节点的此项设置可相同,也可不相同。

}


vrrp_instance VI_1 {                        #定义虚拟路由实例,不同实例ID不同。

   state MASTER                           #定义服务器在keepalived中的角色主服务器

   interface eth0                          #定义进行检测的端口eth0

   virtual_router_id 51               #定义虚拟路由ID,同一个实例的主从一样。

   priority 100                      #定义在虚拟路由器组的权限,越大越高

   advert_int 1                       #定义检测时间间隔

   authentication {                   #定义认证方式密码,主从必须一样

       auth_type PASS

       auth_pass 1111

   }

   virtual_ipaddress {                #指定虚拟IP地址

       192.168.41.249

   }

}

virtual_server 192.168.41.249 80 {  #定义虚拟服务,需指定IP地址和端口,空格隔开。

   delay_loop 6                      #定义RS运行情况监测时间间隔

   lb_algo rr                        #定义负载调度算法

   lb_kind DR                      #定义LVS的工作模式

   nat_mask 255.255.255.0            #定义虚拟服务的mask

   persistence_timeout 50            #定义会话保持时间,S为单位

   protocol TCP                      #指定转发协议

   real_server 192.168.41.31 80 {    #定义真实服务器IP地址和端口

       weight 1                      #定义RS的权重

       TCP_CHECK{                    #RS server健康检查部分

       connect_timeout 10            #定义超出10s连接超

       nb_get_retry 3                #定义重试次数

       delay_before_retry 3          #定义重试时间间隔

       connect_port 80               #定义健康检查端口

   }

   real_server 192.168.41.33 80 {    

       weight 1

       TCP_CHECK{                  

       connect_timeout 10      

       nb_get_retry 3              

       delay_before_retry 3        

       connect_port 80              

   }

}

3)配置LVS-DR-BACKUP的keepalived.conf配置文件

! Configuration File for keepalived


global_defs {

  notification_email {

    752119102@qq.com            #设置报警邮箱,一般不再这做,而是用其他方式报警。

  }

  notification_email_from keepalived@localhost   #设定发送邮件地址

  smtp_server 127.0.0.1                          #设定发送邮件服务器

  smtp_connect_timeout 30                        #设定SMTP连接超时时间

  router_id LVS_DEVEL            #负载均衡器标示,在局域网内是唯一的

}

vrrp_instance VI_1 {                        #定义虚拟路由实例,不同实例ID不同。

   state BACKUP                           #定义服务器在keepalived中的角色

   interface eth0                          #定义进行检测的端口eth0

   virtual_router_id 51               #定义虚拟路由ID,同一个实例的主从一样。

   priority 50                       #定义在虚拟路由器组的权限,越大越高

   advert_int 1                       #定义检测时间间隔

   authentication {                   #定义认证方式密码,主从必须一样

       auth_type PASS

       auth_pass 1111

   }

   virtual_ipaddress {                #指定虚拟IP地址

       192.168.41.249

   }

}

virtual_server 192.168.41.249 80 {  #定义虚拟服务,需指定IP地址和端口,空格隔开。

   delay_loop 6                      #定义RS运行情况监测时间间隔

   lb_algo rr                        #定义负载调度算法

   lb_kind DR                      #定义LVS的工作模式

   nat_mask 255.255.255.0            #定义虚拟服务的mask

   persistence_timeout 50            #定义会话保持时间,S为单位

   protocol TCP                      #指定转发协议

   real_server 192.168.41.31 80 {    #定义真实服务器IP地址和端口

       weight 1                      #定义RS的权重

       TCP_CHECK{                    #RS server健康检查部分

       connect_timeout 10            #定义超出10s连接超时

       nb_get_retry 3                #定义重试次数

       delay_before_retry 3          #定义重试时间间隔

       connect_port 80               #定义健康检查端口

   }

   real_server 192.168.41.33 80 {    

       weight 1

       TCP_CHECK{                  

       connect_timeout 10      

       nb_get_retry 3              

       delay_before_retry 3        

       connect_port 80              

   }

说明:这里主LVS-DR-MASTER和LVS-DR-BACKUP之间的配置的差别就只有红色部分:HA的角色(MASTER,BACKUP)和优先级不同,还有router_id。

4)客户端配置LVS参数

客户端需要做的工作就是绑定我们的VIP在lo口,并且进行ARP抑制,之前的文章已经提过此方法咯。现在我们就换成将配置写成脚本来执行。

脚本内容:

[root@RS2 ~]# cat lvs-client.sh

#!/bin/bask

#       752119102@qq.com

#

. /etc/rc.d/init.d/functions

VIP=(

192.168.41.249

)

function start(){

  for ((i=0;i<`echo ${#VIP[*]}`;i++))

      do

       echo ${i}  ${VIP[$i]}

       ifconfig lo:${i} ${VIP[$i]} netmask 255.255.255.255 up

       route add -host ${VIP[$i]} dev lo

       done

echo "1">/proc/sys/net/ipv4/conf/lo/arp_ignore

echo "2">/proc/sys/net/ipv4/conf/lo/arp_announce

echo "1">/proc/sys/net/ipv4/conf/all/arp_announce

echo "2">/proc/sys/net/ipv4/conf/all/arp_announce

}

function  stop(){

  for ((i=0;i<${#VIP[*]};i++))

      do

       echo ${i}  ${VIP[$i]}

       ifconfig lo:${i} ${VIP[$i]} netmask 255.255.255.255 up

       route del -host ${VIP[$i]} dev lo:${i}

       done

}

case "$1" in

   start)

       start

       exit

       ;;

   stop)

       stop

       exit

       ;;

   *)

       echo "You must use $0:stop|start"

       ;;

esac


5)测试实验结果

如果测试部成功可以按照三角的排查原理来进行排查,显示client到RS端是否能通讯,LB到RS能否通讯,client到LB是否能通讯,client到VIP是否能够通讯。并且查看LVS的运行状态。一定要确保keepalived.conf这个配置文件是正确的。


本文出自 “从头开始” 博客,请务必保留此出处http://atong.blog.51cto.com/2393905/1351709