作者:张鱼小丸子-PingCAP
HAProxy 在 TiDB 中的最佳实践
本文介绍 HAProxy 在 TiDB 中的最佳配置和使用方法。HAProxy 提供 TCP 协议下的负载均衡能力,TiDB 客户端通过连接 HAProxy 提供的浮动 IP 即可对数据进行操作,实现 TiDB Server 层的负载均衡。
HAProxy 简介
HAProxy 是由 C 语言编写的自由开放源码的软件,为基于 TCP 和 HTTP 协议的应用程序提供高可用性、负载均衡和代理服务。因为 HAProxy 能够快速、高效使用 CPU 和内存,所以目前使用非常广泛,许多知名网站诸如 GitHub、Bitbucket、Stack Overflow、Reddit、Tumblr、Twitter 和 Tuenti 以及亚马逊网络服务系统都在使用 HAProxy。
HAProxy 由 Linux 内核的核心贡献者 Willy Tarreau 于 2000 年编写,他现在仍然负责该项目的维护,并在开源社区免费提供版本迭代。最新的稳定版本 2.0.0 于 2019 年 8 月 16 日发布,带来更多优秀的特性。
HAProxy 部分核心功能介绍
- 高可用性:HAProxy 提供优雅关闭服务和无缝切换的高可用功能;
- 负载均衡:L4 (TCP) 和 L7 (HTTP) 两种负载均衡模式,至少 9 类均衡算法,比如 roundrobin,leastconn,random 等;
- 健康检查:对 HAProxy 配置的 HTTP 或者 TCP 模式状态进行检查;
- 会话保持:在应用程序没有提供会话保持功能的情况下,HAProxy 可以提供该项功能;
- SSL:支持 HTTPS 通信和解析;
- 监控与统计:通过 web 页面可以实时监控服务状态以及具体的流量信息。
准备环境
在部署 HAProxy 之前,需准备好以下环境。
硬件要求
根据官方文档,对 HAProxy 的服务器硬件配置有以下建议,也可以根据负载均衡环境进行推算,在此基础上提高服务器配置。
硬件资源 | 最低配置 |
CPU | 2 核,3.5 GHz |
内存 | 16 GB |
存储容量 | 50 GB(SATA 盘) |
网卡 | 万兆网卡 |
依赖软件
根据官方文档,对操作系统和依赖包有以下建议,如果通过 yum 源部署安装 HAProxy 软件,依赖包无需单独安装。
操作系统
操作系统版本 | 架构 |
Linux 2.4 | x86、x86_64、Alpha、SPARC、MIPS 和 PA-RISC |
Linux 2.6 或 3.x | x86、x86_64、ARM、SPARC 和 PPC64 |
Solaris 8 或 9 | UltraSPARC II 和 UltraSPARC III |
Solaris 10 | Opteron 和 UltraSPARC |
FreeBSD 4.10 ~ 10 | x86 |
OpenBSD 3.1 及以上版本 | i386、AMD64、macppc、Alpha 和 SPARC64 |
AIX 5.1 ~ 5.3 | Power™ |
依赖包
- epel-release
- gcc
- systemd-devel
执行如下命令安装依赖包:
{{< copyable “shell-regular” >}}
部署 HAProxy
HAProxy 配置 Database 负载均衡场景操作简单,以下部署操作具有普遍性,不具有特殊性,建议根据实际场景,个性化配置相关的配置文件。
安装 HAProxy
- 使用 yum 安装 HAProxy:
{{< copyable “shell-regular” >}}
- 验证 HAProxy 安装是否成功:
{{< copyable “shell-regular” >}}
HAProxy 命令介绍
执行如下命令查看命令行参数及基本用法:
{{< copyable “shell-regular” >}}
参数 | 说明 |
| 显示简略的版本信息。 |
| 显示详细的版本信息。 |
| 开启 debug 模式。 |
| 禁用后台模式和多进程模式。 |
| 执行分配内存。 |
| 启动过程显示配置和轮询信息。 |
| 开启守护进程模式。 |
| 在加载配置文件之前更改目录位置至 <dir>。 |
| 主从模式。 |
| 静默模式,不输出信息。 |
| 只检查配置文件并在尝试绑定之前退出。 |
| 设置每个进程的最大总连接数为 <limit>。 |
| 设置所有进程的最大可用内存为 <limit>(单位:MB)。 |
| 设置单点最大连接数为 <limit>,默认为 2000。 |
| 将本地实例对等名称改为 <name>,默认为本地主机名。 |
| 将 HAProxy 所有子进程的 PID 信息写入 <file>。 |
| 禁止使用 epoll(7),epoll(7) 仅在 Linux 2.6 和某些定制的 Linux 2.4 系统上可用。 |
| 禁止使用 epoll(2),可改用 select(2)。 |
| 禁止使用 splice(2),splice(2) 在一些旧版 Linux 内核上不可用。 |
| 禁止使用 SO_REUSEPORT。 |
| 忽略服务器地址解析失败。 |
| 禁止在服务器端使用 SSL。 |
| 启动后,向 pidlist 中的 PID 发送 |
| 启动后,向 pidlist 中的 PID 发送 |
| 连接指定的 socket 并从旧进程中获取所有 listening socket,然后,使用这些 socket 而不是绑定新的。 |
| 主从模式下,创建绑定到主进程的 socket,此 socket 可访问每个子进程的 socket。 |
更多有关 HAProxy 命令参数的信息,可参阅 Management Guide of HAProxy 和 General Commands Manual of HAProxy。
配置 HAProxy
yum 安装过程中会生成配置模版,你也可以根据实际场景自定义配置如下配置项。
启动 HAProxy
- 方法一:执行
haproxy
,默认读取/etc/haproxy/haproxy.cfg
(推荐)。
{{< copyable “shell-regular” >}}
- 方法二:使用
systemd
启动 HAProxy。
{{< copyable “shell-regular” >}}
停止 HAProxy
- 方法一:使用
kill -9
。
- 执行如下命令:
{{< copyable “shell-regular” >}}
- 终止 HAProxy 相关的 PID 进程:
{{< copyable “shell-regular” >}}
- 方法二:使用
systemd
。
{{< copyable “shell-regular” >}}