目录
- 前言
- MySQL Cluster基本架构
- 准备工作
- 安装包下载
- 集群规划
- 彻底卸载mysql
- 端口开放
- 集群搭建
- 管理节点
- MySQL Cluster 软件安装
- 添加用户权限
- 管理程序拷贝
- 配置文件
- 管理节点启动
- 常见问题
- 数据节点
- MySQL Cluster 软件安装
- 添加用户权限
- 配置文件
- 数据节点启动
- 常见问题
- SQL节点
- 添加用户权限
- msyqld服务初始化
- 常见问题
- 集群启停
- 测试
- 参考
前言
Mysql Cluster是两项技术的结合:NDB数据库,以及作为SQL前端的MySQL存储引擎。NDB是一个分布式,具备兼容性、非共享的数据库,提供同步复制以及节点间的数据自动分片。(《高性能MySQL》)
MySQL Cluster基本架构
- 管理节点(ndb_mgmd)
负责管理其他各节点IP地址、内存分配以及保存数据路径; - 数据节点(ndbd)
负责存储数据; - SQL节点(mysqld)
提供SQL 的API调用功能,简单地讲就是mysqld服务器
其中管理节点最好单独部署,数据节点和SQL节点可以部署在一起;
准备工作
安装包下载
链接: https://dev.mysql.com/downloads/cluster/7.5.html#downloads.
如下图所示:
集群规划
节点 | IP |
管理节点 | 192.168.10.8 |
数据节点 | 192.168.10.9 |
数据节点 | 192.168.10.19 |
SQL节点 | 192.168.10.9 |
SQL节点 | 192.168.10.19 |
建议采用内网IP,使用外网IP需要考虑host以及网卡设置等情况,需要提前完成配置
彻底卸载mysql
需要将以上各IP中msyql服务彻底卸载,包括关闭mysql相关服务、卸载软件以及删除与mysql相关的文件;
端口开放
集群中个节点需要开放相应端口,MySQL Cluster所用端口为1186、2202,mysql端口为3306
集群搭建
管理节点
MySQL Cluster 软件安装
解压缩安装包后,复制到指定位置
[root@10 ~]# cd /home
[root@10 home]# gunzip mysql-cluster-gpl-7.5.20-linux-glibc2.12-x86_64.tar.gz
[root@10 home]# tar -xvf mysql-cluster-gpl-7.5.20-linux-glibc2.12-x86_64.tar
[root@10 home]# mkdir /usr/local/mysql-cluster
[root@10 home]# mv mysql-cluster-gpl-7.5.20-linux-glibc2.12-x86_64/* /usr/local/mysql-cluster
添加用户权限
添加安装需要相关用户权限
[root@10 home]# groupadd mysql
[root@10 home]# useradd mysql -g mysql
[root@10 home]# cd /usr/local/mysql-cluster/
[root@10 mysql-cluster]# chown -R root .
管理程序拷贝
[root@10 mysql-cluster]# cp bin/ndb_mgm* /usr/local/bin
[root@10 mysql-cluster]# cd /usr/local/bin
[root@10 mysql-cluster]# chmod +x ndb_mgm*
配置文件
新建管理节点的配置文件config.ini
[root@10 mysql-cluster]# cd /var/lib/mysql-cluster/
[root@10 mysql-cluster]# touch config.ini
[root@10 mysql-cluster]# vim config.ini
config.ini配置内容为:
[NDBD DEFAULT]
NoOfReplicas =2
DataMemory = 512M
IndexMemory = 64M
[NDB_MGMD]
NodeId=1
hostname =192.168.10.8
datadir =/var/lib/mysql-cluster
[NDBD]
NodeId =2
hostname =192.168.10.9
datadir =/usr/local/mysql-cluster/data
[NDBD]
NodeId =3
hostname =192.168.10.19
datadir =/usr/local/mysql-cluster/data
[mysqld]
NodeId =4
hostname =192.168.10.9
[mysqld]
NodeId =5
hostname =192.168.10.19
其中:
[NDBD DEFAULT]
代表每个ndbd节点的默认设置,包括:
- NoOfReplicas :每份数据在不同节点上的存储份数,根据实际情况确定
- DataMemory :数据存储占用内存
- IndexMemory : 索引存储占用内存
[NDB_MGMD]
代表管理节点的设置,包括:
- NodeId:节点ID
- hostname:管理节点IP地址,推荐采用内网IP
- datadir:管理节点数据存储位置
[NDBD]
代表ndb数据节点的配置,包括:
- NodeId:节点ID
- hostname:数据节点IP地址,推荐采用内网IP
- datadir:数据节点数据存储位置
[msyqld]
代表SQL节点的设置,包括:
- NodeId:节点ID
- hostname:SQL节点IP地址,推荐采用内网IP
管理节点启动
[root@10 mysql-cluster]# /usr/local/bin/ndb_mgmd -f /var/lib/mysql-cluster/config.ini --initial --ndb-nodeid=1
MySQL Cluster Management Server mysql-5.7.32 ndb-7.5.20
显示MySQL Cluster Management Server mysql-5.7.32 ndb-7.5.20则代表安装正确
查看管理节点运行情况:
[root@10 ~]# /usr/local/bin/ndb_mgm -e show
Connected to Management Server at: localhost:1186
Cluster Configuration
---------------------
[ndbd(NDB)] 2 node(s)
id=2 (not connected, accepting connect from 192.168.10.9)
id=3 (not connected, accepting connect from 192.168.10.19)
[ndb_mgmd(MGM)] 1 node(s)
id=1 @192.168.10.8 (mysql-5.7.32 ndb-7.5.20)
[mysqld(API)] 2 node(s)
id=4 (not connected, accepting connect from 192.168.10.9)
id=5 (not connected, accepting connect from 192.168.10.19)
由于数据节点和sql节点尚未启动,所以看不到节点信息
管理节点初始化之后,再启动就不需要–initial后缀,管理节点的关闭命令为:
/usr/local/bin/ndb_mgm -e shutdown
常见问题
- 找不到相关目录:新建相关目录
- hostname无法连接:请确认IP地址是否可用,并且能够网卡配置与host配置支持使用该IP地址
数据节点
MySQL Cluster 软件安装
解压缩安装包后,复制到指定位置,与管理节点一致
[root@10 ~]# cd /home
[root@10 home]# gunzip mysql-cluster-gpl-7.5.20-linux-glibc2.12-x86_64.tar.gz
[root@10 home]# tar -xvf mysql-cluster-gpl-7.5.20-linux-glibc2.12-x86_64.tar
[root@10 home]# mkdir /usr/local/mysql-cluster
[root@10 home]# mv mysql-cluster-gpl-7.5.20-linux-glibc2.12-x86_64/* /usr/local/mysql-cluster
添加用户权限
[root@10 home]# groupadd mysql
[root@10 home]# useradd mysql -g mysql
配置文件
由于本文中数据节点与SQL节点共用一台机器,所以配置文件my.cnf中既有数据节点配置也有SQL节点配置
[root@10 home]# vim /etc/my.cnf
my.cnf
[mysqld]
basedir=/usr/local/mysql-cluster
datadir=/usr/local/mysql-cluster/data
socket=/usr/local/mysql-cluster/sock/mysql.sock
user=mysql
symbolic-links=0
ndbcluster
ndb-connectstring=192.168.10.8
port=3306
[mysql_cluster]
ndb-connectstring=192.168.10.8
[ndbd]
ndb-connectstring=192.168.10.8
[mysqld_safe]
log-error=/usr/local/mysql-cluster/logs/mysql.pid
pid-file=/usr/local/mysql-cluster/logs/error.log
[mysql]
socket=/usr/local/mysql-cluster/sock/mysql.sock
#
# include all files from the config directory
#
!includedir /etc/my.cnf.d
其中,需要注意的配置为:
datadir:需要与管理节点config.ini中的数据节点datadir保持一致
ndb-connectstring:配置文件中都设置为管理节点IP地址
数据节点启动
[root@10 mysql-cluster]# ./bin/ndbd --initial
2021-01-08 15:38:44 [ndbd] INFO -- Angel connected to '192.168.10.8:1186'
2021-01-08 15:38:44 [ndbd] INFO -- Angel allocated nodeid: 3
数据节点初始化后,之后再次启动就不需要–initial后缀
回到管理节点,查看集群状态,发现数据节点已经连接
[root@10 ~]# /usr/local/bin/ndb_mgm -e show
Connected to Management Server at: localhost:1186
Cluster Configuration
---------------------
[ndbd(NDB)] 2 node(s)
id=2 (not connected, accepting connect from 192.168.10.9)
id=3 @192.168.10.19 (mysql-5.7.32 ndb-7.5.20, starting, Nodegroup: 0)
[ndb_mgmd(MGM)] 1 node(s)
id=1 @192.168.10.8 (mysql-5.7.32 ndb-7.5.20)
[mysqld(API)] 2 node(s)
id=4 (not connected, accepting connect from 192.168.10.9)
id=5 (not connected, accepting connect from 192.168.10.19)
常见问题
- 找不到相关文件和文件夹:新建相关文件和文件夹
- IP地址无法连接:查看管理节点和数据节点本身网卡设置与端口开放情况
SQL节点
由于本文中数据节点与SQL节点部署在同一台机器上,所以不需要再进行软件安装,配置文件也已经配置完成
添加用户权限
[root@10 home]# cd /usr/local/mysql-cluster/
[root@10 mysql-cluster]# mkdir logs
[root@10 mysql-cluster]# mkdir data
[root@10 mysql-cluster]# chown -R mysql:mysql ./
根据配置文件创建相关文件夹,本文为了方便直接将log和data文件都建立在安装目录下,建议实际使用时修改位置,但是各文件夹都需要增加mysql用户权限
msyqld服务初始化
需要对mysqld服务进行初始化操作
[root@10 mysql-cluster]# ./bin/mysqld --initialize --user=mysql
初始化操作需要一定时间执行,执行完成后末尾会有初始密码,改密码为需要记录
初始化完成后,将mysql程序复制到启动目录下,方便mysqld服务启动
[root@10 mysql-cluster]# cp support-files/mysql.server /etc/init.d/mysqld
[root@10 mysql-cluster]# chmod +x /etc/init.d/mysqld
[root@10 mysql-cluster]# service mysqld start
Starting MySQL.... SUCCESS!
回到管理节点,查看集群状态,发现数据节点已经连接
在这里插入代码片
[root@10 ~]# /usr/local/bin/ndb_mgm -e show
Connected to Management Server at: localhost:1186
Cluster Configuration
---------------------
[ndbd(NDB)] 2 node(s)
id=2 @192.168.10.9 (mysql-5.7.32 ndb-7.5.20, starting, Nodegroup: 0)
id=3 @192.168.10.19 (mysql-5.7.32 ndb-7.5.20, starting, Nodegroup: 0)
[ndb_mgmd(MGM)] 1 node(s)
id=1 @192.168.10.8 (mysql-5.7.32 ndb-7.5.20)
[mysqld(API)] 2 node(s)
id=4 (not connected, accepting connect from 192.168.10.9)
id=5 @192.168.10.19 (mysql-5.7.32 ndb-7.5.20)
常见问题
- 必须启动全部数据节点才能启动SQL节点,否则连接不上
- mysqld初始化时需要data目录为空
- 出现缺少文件、目录错误时建议新建相关文件、文件夹
集群启停
启动顺序为:1.管理节点;2.数据节点(全部);3.SQL节点
测试
在SQL节点通过mysqld服务修改密码并开启远程访问权限,通过navicat工具测试集群是否正常工作