一、什么是动态负载均衡

传统的负载均衡,如果upstream参数发生变化,每次都需要重新加载nginx.conf文件,因此扩展性不是很高,所以我们可以采用动态负载均衡,实现upstream可配置化、动态化,无需人工重新加载nginx.conf。这类似于分布式配置中心。

二、动态负载均衡的实现方案

1、Consul+Consul-template 每次发现配置更改需要raload nginx,重启Nginx。
2、Consul+OpenResty 实现无需raload动态负载均衡
3、Consul+upsync+Nginx 实现无需raload动态负载均衡

三、Consul环境搭建

Consul是一款开源的分布式服务注册与发现系统,通过HTTP API可以使得服务注册、发现实现起来非常简单。
1、下载consul_0.7.5_linux_amd64.zip
wget https://releases.hashicorp.com/consul/0.7.5/consul_0.7.5_linux_amd64.zip

2、解压consul_0.7.5_linux_amd64.zip
unzip consul_0.7.5_linux_amd64.zip

如果解压出现该错误 -bash: unzip: 未找到命令 解决办法 yum -y install unzip

3、执行以下 ./consul 出现以下信息就说明安装成功

confd nginx nacos 配置 nginx consul_consul+upsync+nginx


4、启动consul

我的linux Ip地址192.168.112.129

./consul agent -dev -ui -node=consul-dev -client=192.168.112.129

5、关闭临时防火墙
systemctl stop firewalld

6、浏览器访问192.168.112.129:8500

confd nginx nacos 配置 nginx consul_Nginx_02

7、使用PostMan 注册Http服务
http://192.168.112.129:8500/v1/catalog/register

参数1

{“Datacenter”: “dc1”, “Node”:“tomcat”, “Address”:“192.168.5.165”,“Service”: {“Id” :“192.168.5.165:8081”, “Service”: “itmayeidu”,“tags”: [“dev”], “Port”: 8080}}

参数2

{“Datacenter”: “dc1”, “Node”:“tomcat”, “Address”:“192.168.5.165”,“Service”: {“Id” :“192.168.5.165:8081”, “Service”: “itmayeidu”,“tags”: [“dev”], “Port”: 8081}}

Datacenter指定数据中心,Address指定服务IP,Service.Id指定服务唯一标识,Service.Service指定服务分组,Service.tags指定服务标签(如测试环境、预发环境等),Service.Port指定服务端口。

7.发现Http服务

http://172.20.101.111:8500/v1/catalog/service/item_jd_tomcat

四、UpSync环境搭建

1、nginx-upsync-module简介

Upsync是新浪微博开源的基于Nginx实现动态配置的三方模块。Nginx-Upsync-Module的功能是拉取Consul的后端server的列表,并动态更新Nginx的路由信息。此模块不依赖于任何第三方模块。Consul作为Nginx的DB,利用Consul的KV服务,每个Nginx Work进程独立的去拉取各个upstream的配置,并更新各自的路由。

2、安装nginx-upsync-module
wget https://github.com/weibocom/nginx-upsync-module/archive/master.zip

3、解压
unzip master.zip

五、Nginx环境搭建

1、安装Nginx可以参考我前面的文章:Linux下安装Nginx

2、解压Nginx
tar -zxvf nginx-1.9.0.tar.gz

3、配置Nginx

groupadd nginx
useradd -g nginx -s /sbin/nologin nginx
mkdir -p /var/tmp/nginx/client/
mkdir -p /usr/local/nginx

4、编译Nginx

cd nginx-1.9.0

./configure   --prefix=/usr/local/nginx   --user=nginx   --group=nginx   --with-http_ssl_module   --with-http_flv_module   --with-http_stub_status_module   --with-http_gzip_static_module   --with-http_realip_module   --http-client-body-temp-path=/var/tmp/nginx/client/   --http-proxy-temp-path=/var/tmp/nginx/proxy/   --http-fastcgi-temp-path=/var/tmp/nginx/fcgi/   --http-uwsgi-temp-path=/var/tmp/nginx/uwsgi   --http-scgi-temp-path=/var/tmp/nginx/scgi   --with-pcre --add-module=../nginx-upsync-module-master

make && make install

编译的是报错
./configure: error: SSL modules require the OpenSSL library.
解决办法
yum -y install openssl openssl-devel

六、Upstream动态配置

##动态去consul 获取注册的真实反向代理地址
   upstream itmayiedu{
        server 127.0.0.1:11111;
        upsync 192.168.112.129:8500/v1/kv/upstreams/itmayiedu upsync_timeout=6m upsync_interval=500ms upsync_type=consul strong_dependency=off;
        ## 配置upsync从consul拉去最新服务信息存放的地址
        upsync_dump_path /usr/local/nginx/conf/servers/servers_test.conf;
    }

    server {
        listen       80;
        server_name  localhost;

        location / {
            proxy_pass http://itmayiedu;
            index  index.html index.htm;
        }
    }

upsync指令指定从consul哪个路径拉取上游服务器配置;upsync_timeout配置从consul拉取上游服务器配置的超时时间;upsync_interval配置从consul拉取上游服务器配置的间隔时间;upsync_type指定使用consul配置服务器;strong_dependency配置nginx在启动时是否强制依赖配置服务器,如果配置为on,则拉取配置失败时nginx启动同样失败。upsync_dump_path指定从consul拉取的上游服务器后持久化到的位置,这样即使consul服务器出问题了,本地还有一个备份。

注意:替换 consul 注册中心地址

创建upsync_dump_path

mkdir /usr/local/nginx/conf/servers/

upsync_dump_path指定从consul拉取的上游服务器后持久化到的位置,这样即使consul服务器出问题了,本地还有一个备份。

启动consul

临时关闭防火墙 systemctl stop firewalld

我的linux Ip地址192.168.112.129

./consul agent -dev -ui -node=consul-dev -client=192.168.112.129

添加nginx Upstream服务

1.使用linux命令方式发送put请求

curl -X PUT http://192.168.112.129:8500/v1/kv/upstreams/itmayiedu/192.168.212.1:8081

curl -X PUT http://192.168.112.129:8500/v1/kv/upstreams/itmayiedu/192.168.212.1:8081

2.使用postmen 发送put请求

http://192.168.112.129:8500/v1/kv/upstreams/itmayiedu/192.168.212.1:8081 http://192.168.112.129:8500/v1/kv/upstreams/itmayiedu/192.168.212.1:8081

负载均衡信息参数

{“weight”:1, “max_fails”:2, “fail_timeout”:10, “down”:0}