一、实验环境:
1.各软件版本:
系统版本:CentOS Linux release 7.4.1708 (Core)
php版本:PHP 7.2
nginx版本:nginx-1.12.2
数据库版本:MariaDB 10
WordPress版本:4.9.4
关闭防火墙与selinux
2.实验架构及IP分配:
调度器一台:
安装ipvsadm
VIP:192.168.11.128(模拟公网IP,域名www.ready.cn) DIP:172.16.142.128
realserver两台:
两台都安装nginx+PHP,且保持配置一致
RIP1:172.16.142.11 RS2:172.16.142.22
数据库服务器一台:
安装MariaDB
IP:172.16.142.33
存储服务器一台:
提供NFS存储服务
二、所需软件安装配置,并测试PHP是否正常解析
1.RS1和RS2安装nginx+PHP:
a>安装epel源
rpm -Uvh https://dl.fedoraproject.org/pub/epel/7/x86_64/Packages/e/epel-release-7-11.noarch.rpm
b>yum安装nginx
yum install -y nginx
c>yum安装PHP
rpm -Uvh https://mirror.webtatic.com/yum/el7/webtatic-release.rpm
yum install -y yum install php72w-common php72w-fpm php72w-opcache php72w-gd php72w-mysqlnd php72w-mbstring php72w-pecl-redis php72w-pecl-memcached php72w-devel
d>测试两台RS是否可以正常接收并响应web请求,添加nginx server,创建网站目录,将用户请求结尾为.php的URL交给php-fpm解析,并创建phpinfo做页面测试
vim /etc/nginx/conf.d/php.conf
server {
listen 80;
server_name www.ready.org; #因为是做试验,所以将hosts中添加本地域名解析
location / {
root html/php; #nginx配置中网站的默认根路径为/usr/share/nginx/,这里指定的是相对路径
index index.html index.htm;
}
location ~ .*\.(php|php5)?$ { #以任意开头以.php结尾的URI用此location做匹配
root html/php;
fastcgi_pass 127.0.0.1:9000; #将请求交由fastcgi(php-fpm)处理
fastcgi_index index.php;
include fastcgi.conf;
}
}
mkdir -p /usr/share/nginx/html/php/ #创建网站目录(不是必须步骤,也可使用默认目录)
vim /usr/share/nginx/html/php/index.php
e>将nginx启动并设置开机启动
systemctl start nginx
systemctl enable nginx
f>开启php-fpm并设置为开机启动
g>浏览器访问www.ready.org与www.ready.org/index.php,显示以下界面便表示nginx与PHP已安装成功。
然后删除index.php文件,安全因素。
以上步骤不涉及负载均衡的使用,下面进行加入负载均衡服务器的配置测试,先删除之前配置好的nginx测试server,或将其注释掉
mv /etc/nginx/conf.d/php.conf /etc/nginx/conf.d/php.conf.backup
若是要将RS1、RS2并入负载均衡集群,则需将RS1、RS2设置为监听本机80端口且将结尾为.php的URI交php-fpm解析
即修改/etc/nginx/nginx.conf将匹配PHP解析的location加入默认配置即可,修改如下:
vim /etc/nginx/nginx.conf
worker_processes 1;
events {
worker_connections 1024;
}
http {
include mime.types;
default_type application/octet-stream;
log_format main '$remote_addr - $remote_user [$time_local] "$request"
'
'$status $body_bytes_sent "$http_referer" '
'"$http_user_agent" "$http_x_forwarded_for"';
access_log /var/log/nginx/access.log main;
sendfile on;
tcp_nopush on;
tcp_nodelay on;
keepalive_timeout 65;
types_hash_max_size 2048;
server {
listen 80;
#server_name _; #我理解的是此负载均衡集群中没有涉及域名解析,所以server_name可以省略
location / {
root /usr/share/nginx/html/php; #我觉得root路径尽量要用绝对路径,最好是写在location中,这样便于管理,方便查阅
index index.php index.html index.htm; #不要忘了加index.php,不加会导致只输入域名时返回403错误
}
location ~ .*\.(php|php5)?$ {
root /usr/share/nginx/html/php;
index index.php;
fastcgi_pass 127.0.0.1:9000;
fastcgi_index index.php;
include fastcgi.conf;
}
}
}
2.安装ipvsadm并配置
a>安装ipvsadm
yum install -y ipvsadm
b>配置lvs服务器,测试调度是否成功
ipvsadm -A -t 192.168.11.128:80 -s rr #添加tcp协议VIP,端口为80,调度算法为轮询
ipvsadm -a -t 192.168.11.128:80 -r 172.16.142.11 -m #添加RS1,类型为net
ipvsadm -a -t 192.168.11.128:80 -r 172.16.142.22 -m #添加RS2,类型为net
-s 设置调度算法
rr 轮询
wrr 加权轮询
sh 原地址哈希调度,保证整个系统的出入口唯一
wlc 加权最小连接数调度
c>开启Linux的内核转发功能
此步骤很关键,因为关系到请求报文能否经由VIP后再转发至DIP。
sysctl -w net.ipv4.ip_forward=1
浏览器访问192.168.11.128与192.168.11.128/index.php
若出现测试页面即为配置成功
3.安装并配置MariaDB
a>在172.16.142.33上yum安装MariaDB(以下数据库配置有很多安全隐患,待后续深入学习数据库后会另起博文详解数据库的相关配置)
vim /etc/yum.repos.d/mariadb.repo
[mariadb]
name = MariaDB
baseurl = https://mirrors.ustc.edu.cn/mariadb/yum/10.2/centos7-amd64
gpgkey=https://mirrors.ustc.edu.cn/mariadb/yum/RPM-GPG-KEY-MariaDB
gpgcheck=1
yum install -y MariaDB-server
b>配置数据库
mysql_secure_installation #初始化数据库,设置root密码,匿名用户权限等
mysql -uroot -p123456 #登入数据库进行用户及库的创建与配置
>GRANT ALL PRIVILEGES ON *.* TO 'mysql'@'%'IDENTIFIED BY '123456' WITH GRANT OPTION; #创建账户mysql,密码为123456,并允许任意IP访问此账户数据库,权限为ALL
>CREATE DATABASE wordpress; #创建名为wordpress的库,安装完WordPress后会要求在数据库创建库,这里事先创建好
>quit
4.安装WordPress
a>将下载好的WordPress包解压至已创建好的/usr/share/nginx/html/php目录下
b>为模拟互联网环境,将'www.ready.cn 192.168.11.128'hosts文件加入本地解析规则
c>浏览器输入www.ready.cn,按提示步骤进行操作便可安装完成
三、关于lvs-nat类型下ipvsadm的一些用法
ipvsadm -ln --stats #状态信息
例:
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Conns InPkts OutPkts InBytes OutBytes
-> RemoteAddress:Port
TCP 192.168.11.128:80 25 951 353 83843 2050036
-> 172.16.142.11:80 12 574 205 46157 1303372
-> 172.16.142.22:80 13 377 148 37686 746664
Conns 请求连接数
InPkts 入站的报文数
OutPkts 出站的报文数
InBytes 入站的字节数
OutBytes 出站的字节数
ipvsadm -ln --rate #每秒传输速率信息
ipvsadm -ln -c #当前站点访问情况
例:
IPVS connection entries
pro expire state source virtual destination
TCP 14:55 ESTABLISHED 192.168.11.1:53035 192.168.11.128:80 172.16.142.22:80
TCP 14:55 ESTABLISHED 192.168.11.1:53016 192.168.11.128:80 172.16.142.11:80
TCP 01:46 TIME_WAIT 192.168.11.1:53029 192.168.11.128:80 172.16.142.11:80
TCP 01:09 TIME_WAIT 192.168.11.1:52990 192.168.11.128:80 172.16.142.11:80
这里需要注意的是每次输入网址访问页面时,并不一定只发送了一个请求,所以只访问一次页面时,也会出现多个RS在响应请求。另外这里的state项可以帮助理解tcp/ip协议的“握手与挥手”
ipvsadm -S -n #保存规则,一般是保存在/etc/sysconfig/ipvsadm
例:ipvsadm -S -n > /etc/sysconfig/ipvsadm
也可使用systemctl stop ipvsadm.service
做自动保存
ipvsadm -C #清空规则
四、缺陷
网站会有用户上传文件的需求,所以必须保证RS1和RS2上传文件目录保存同步或者共用一个存储
可用inotify+rsync或者同时挂载NFS实现,后续会更新演示