一、说明

1.准备服务器

计划建立有5个节点的MySQL CLuster体系,需要用到5台服务器,但是我们做实验时没有这么多机器,可以只用3台,提供5个节点的MySQL CLuster体系,将SQL节点和数据节点共用一台机器,具体如下。

主机名

节点

对应的IP和端口

DB-mgm

管理节点

10.10.6.201:1186

DB-node1

数据节点

10.10.6.211:2202

DB-node1

SQL节点

10.10.6.211:3306

DB-node2

数据节点

10.10.6.212:2202

DB-node2

SQL节点

10.10.6.212:3306

2.准备软件包

现在的mysql提供了一个专门作集群的安装包,这样就不用一个个的下载所需要的工具了。从官网下载。

http://cdn.mysql.com/Downloads/MySQL-Cluster-7.4/mysql-cluster-gpl-7.4.5-linux-glibc2.5-x86_64.tar.gz

二、安装

(一)数据节点和SQL节点(各两台)
1.添加mysql用户和组,这是必需的。
[root@DB-node1 ~]# groupadd mysql 
[root@DB-node1 ~]# useradd -g mysql mysql 
[root@DB-node1 ~]#

2.开始安装,下载的版本是免编译的,复制过来就可以用了。
[root@DB-node1 ~]# http://cdn.mysql.com/Downloads/MySQL-Cluster-7.4/mysql-cluster-gpl-7.4.5-linux-glibc2.5-x86_64.tar.gz 
[root@DB-node1 ~]# tar -zxvf mysql-cluster-gpl-7.4.5-linux-glibc2.5-x86_64.tar.gz -C /usr/local/ [root@DB-node1 ~]# ln -sv /usr/local/mysql-cluster-gpl-7.4.5-linux-glibc2.5-x86_64/ /usr/local/mysql 
[root@DB-node1 ~]#

3.修改目录权限,这也是必需的,不然第四步会报错的。
[root@DB-node1 ~]# chown -R mysql.root /usr/local/mysql 
[root@DB-node1 ~]# chown -R mysql.root /usr/local/mysql/ 
[root@DB-node1 ~]#

4.安装初始的数据库表
[root@DB-node1 ~]# /usr/local/mysql/scripts/mysql_install_db --user=mysql 
FATAL ERROR: Could not find ./bin/my_print_defaults 
If you compiled from source, you need to run 'make install' to 
copy the software into the correct location ready for operation. 
If you are using a binary release, you must either be at the top 
level of the extracted archive, or pass the --basedir option 
pointing to that location.

如果出现上面错误,说明没有指定mysql目录,需手工指定。

解决方法

[root@DB-node1 ~]# /usr/local/mysql/scripts/mysql_install_db --user=mysql --basedir=/usr/local/mysql --datadir=/usr/local/mysql/data/

5.设置mysql服务为开机自启动并启动
[root@DB-node1 ~]# cp /usr/local/mysql/support-files/mysql.server /etc/rc.d/init.d/mysqld 
[root@DB-node1 ~]# chmod +x /etc/rc.d/init.d/mysqld  
[root@DB-node1 ~]# chkconfig --add mysqld  
[root@DB-node1 ~]# chkconfig --list mysqld         
mysqld          0:off   1:off   2:on    3:on    4:on    5:on    6:off 
[root@DB-node1 ~]# 
[root@DB-node1 ~]# service mysqld start

到这一步,在数据节点和SQL节点上就算安装好了。

(二)管理节点

管理节点的安装更简单,只要在数据节点和SQL节点服务器上复制些文件出来就行了,虽然只有一步,[root@DB-mgm ~]# scp 10.10.6.211:/usr/local/mysql/bin/ndb_mgm* /usr/local/bin/

[root@DB-mgm ~]# ll /usr/local/bin/ndb* 
-rwxr-xr-x 1 root root  7137184 Apr 13 09:45 /usr/local/bin/ndb_mgm 
-rwxr-xr-x 1 root root 16336025 Apr 13 09:45 /usr/local/bin/ndb_mgmd 
[root@DB-mgm ~]#

管理节点只要ndb_mgm和ndb_mgmd两个文件和一个配置文件即可,因此把这三个文件复制到那里,那里就是管理节点了。ndb_mgmd是mysql cluster管理服务器,ndb_mgm是客户端管理工具,等一下会用到它们的。到目前为止两个SQL节点两个数据节点和一个管理节点都安装完成了,但是还不能工作,得进行配置,把这几个节点联系在一起协同工作。

三、配置

(一)数据节点和SQL节点(各两台)

mysql服务启动时会默认加载/etc/my.cnf作为其配置文件,要将一个mysql服务器配置成一个数据节点和SQL节点也非常的简单:

只要在内容结尾加上下面4行就将这个mysql服务器变成了一个数据节点和SQL节点。

ndbcluster                             \\运行NDB存储引擎 
ndb-connectstring=10.10.6.201          \\指定管理节点  这两行声明其为SQL节点 
[mysql_cluster] 
ndb-connectstring=10.10.6.201          \\指定管理节点  这两行声明其为数据节点 
新建mysql的配置文件 
[root@DB-node1 ~]# vi /etc/my.cnf 
[root@DB-node1 ~]# more /etc/my.cnf  
[client] 
port=3306 
socket=/usr/local/mysql/mysql.sock 
[mysqld] 
basedir=/usr/local/mysql/ 
datadir=/usr/local/mysql/data 
user= mysql 
pid-file=/usr/local/mysql/mysqld.pid 
log-error=/usr/local/mysql/mysqld.err 
以下四行为新增加内容 
ndbcluster                             \\运行NDB存储引擎 
ndb-connectstring=10.10.6.201          \\指定管理节点  这两行声明其为SQL节点 
[mysql_cluster] 
ndb-connectstring=10.10.6.201          \\指定管理节点  这两行声明其数据节点 
[root@DB-node1 ~]#

注意两台服务器都得这样配置。

(二)管理节点

管理节点的配置复杂一点,在管理服务器/usr/local/mysql/目录中创建config.ini文件。

网上说 使用mysql-cluster,但是启动时 总时有如下提示:

[root@DB-mgm ~]# ndb_mgmd -f /usr/local/mysql-cluster/config.ini  
MySQL Cluster Management Server mysql-5.6.23 ndb-7.4.5 
2015-04-13 14:13:28 [MgmtSrvr] INFO     -- The default config directory '/usr/local/mysql/mysql-cluster' does not exist. Trying to create it... 
Failed to create directory '/usr/local/mysql/mysql-cluster', error: 2 
2015-04-13 14:13:28 [MgmtSrvr] ERROR    -- Could not create directory '/usr/local/mysql/mysql-cluster'. Either create it manually or specify a different directory with --configdir=<path> 
[root@DB-mgm ~]#

最后改成了/usr/local/mysql,就可以了

[root@DB-mgm ~]# mkdir /usr/local/mysql 
[root@DB-mgm ~]# vi /usr/local/mysql/config.ini 
[root@DB-mgm ~]# more /usr/local/mysql/config.ini  
[NDBD DEFAULT] 
NoOfReplicas=1           \\每个数据节点的镜像数量 
DataMemory=500M          \\每个数据节点中给数据分配的内存 
IndexMemory=300M         \\每个数据节点中给索引分配的内存 
[TCP DEFAULT] 
portnumber=2202          \\数据节点的默认连接端口 
[NDB_MGMD]               \\配置管理节点 
hostname=10.10.6.201 
datadir=/usr/local/mysql/            \\管理节点数据(日志)目录 
[NDBD] 
hostname=10.10.6.211                  \\数据节点配置 
datadir=/usr/local/mysql/data/        \\数据节点目录 
[NDBD] 
hostname=10.10.6.212 
datadir=/usr/local/mysql/data/ 
[MYSQLD]                             \\SQL节点目录 
hostname=10.10.6.211 
[MYSQLD] 
hostname=10.10.6.212 
[root@DB-mgm ~]#

[NDBD DEFAULT]:表示每个数据节点的默认配置在每个节点的[NDBD]中不用再写这些选项,只能有一个。
[NDB_MGMD]:表示管理节点的配置,只有一个。
[NDBD]:表示每个数据节点的配置,可以有多个。
[MYSQLD]:表示SQL节点的配置,可以有多个,分别写上不同SQL节点的IP地址,也可以什么都不写,只保留一个空节点,表示任意一个IP地址都可以进行访问,此节点的个数表明了可以用来连接数据节点的SQL节点总数。

四、启动

(一)管理节点
1.启动管理节点

mysql cluster 需要各个节点都 进行启动后才可以工作,节点的启动顺序为管理节点->数据节点->SQL节点。首先启动管理节点

[root@DB-mgm ~]# ndb_mgmd -f /usr/local/mysql/config.ini          
MySQL Cluster Management Server mysql-5.6.23 ndb-7.4.5 
2015-04-13 14:14:14 [MgmtSrvr] INFO     -- The default config directory '/usr/local/mysql/mysql-cluster' does not exist. Trying to create it... 
2015-04-13 14:14:14 [MgmtSrvr] INFO     -- Sucessfully created config directory 
2015-04-13 14:14:14 [MgmtSrvr] WARNING  -- at line 7: [TCP] portnumber is deprecated 
[root@DB-mgm ~]# 
[root@DB-mgm ~]# echo "/usr/local/bin/ndb_mgmd -f /usr/local/mysql/config.ini "  >>/etc/rc.local 
[root@DB-mgm ~]#

命令行中的ndb_mgmd是mysql cluster的管理服务器,后面的-f表示后面的参数是启动的参数配置文件。如果在启动后过了几天又添加了一个数据节点,这时修改了配置文件启动时就必须加上--initial参数,不然添加的节点不会作用在mysql cluster中。

./ndb_mgmd -f /var/lib/mysql-cluster/config.ini --initial

启动时可能会报个WARNING,如WARNING  -- at line 7: [TCP] portnumber is deprecated,这个不用管。可以正常工作的。

2.查看有无启动成功
[root@DB-mgm ~]# ls /usr/local/mysql/ 
config.ini  mysql-cluster  ndb_1_cluster.log  ndb_1_out.log  ndb_1.pid 
[root@DB-mgm ~]#  
[root@DB-mgm ~]# netstat -tlnp | grep 1186 
tcp        0      0 0.0.0.0:1186                0.0.0.0:*                   LISTEN      3075/ndb_mgmd        
[root@DB-mgm ~]# ndb_mgm 
-- NDB Cluster -- Management Client -- 
ndb_mgm> show 
Connected to Management Server at: localhost:1186 
Cluster Configuration 
--------------------- 
[ndbd(NDB)]     2 node(s) 
id=2 (not connected, accepting connect from 10.10.6.211) 
id=3 (not connected, accepting connect from 10.10.6.212) 
[ndb_mgmd(MGM)] 1 node(s) 
id=1    @10.10.6.201  (mysql-5.6.23 ndb-7.4.5) 
[mysqld(API)]   2 node(s) 
id=4 (not connected, accepting connect from 10.10.6.211) 
id=5 (not connected, accepting connect from 10.10.6.212) 
ndb_mgm> exit 
[root@DB-mgm ~]#

(二)数据节点(两台)

安装后第一次启动数据节点时要加上--initial参数,其它时候不要加,除非是在备份、恢复或配置变化后重启时。

[root@DB-node1 ~]# /usr/local/mysql/bin/ndbd --initial 
2015-04-13 14:49:59 [ndbd] INFO     -- Angel connected to '10.10.6.201:1186' 
2015-04-13 14:49:59 [ndbd] INFO     -- Angel allocated nodeid: 2 
[root@DB-node1 ~]# netstat -tlnp |grep 2202 
tcp        0      0 10.10.6.211:2202            0.0.0.0:*                   LISTEN      14780/ndbd           
[root@DB-node1 ~]#     
[root@DB-node1 ~]# echo /usr/local/mysql/bin/ndbd >>/etc/rc.local 
[root@DB-node1 ~]#

(三)SQL节点(两台)

[root@DB-node1 ~]# service  mysqld start

Starting MySQL SUCCESS! 

[root@DB-node1 ~]# 

(四)客户端管理

这时就进入到客户端或管理节点,可以对mysql cluster进行各项操作,进入后会有ndb_mgm > 提示符出现,首先来查看各节点的连接情况,在ndb_mgm> 提示符下输入show:

[root@DB-mgm ~]# ndb_mgm 
-- NDB Cluster -- Management Client -- 
ndb_mgm> show 
Connected to Management Server at: localhost:1186 
Cluster Configuration 
--------------------- 
[ndbd(NDB)]     2 node(s) 
id=2    @10.10.6.211  (mysql-5.6.23 ndb-7.4.5, Nodegroup: 0, *) 
id=3    @10.10.6.212  (mysql-5.6.23 ndb-7.4.5, Nodegroup: 1) 
[ndb_mgmd(MGM)] 1 node(s) 
id=1    @10.10.6.201  (mysql-5.6.23 ndb-7.4.5) 
[mysqld(API)]   2 node(s) 
id=4    @10.10.6.211  (mysql-5.6.23 ndb-7.4.5) 
id=5    @10.10.6.212  (mysql-5.6.23 ndb-7.4.5) 
ndb_mgm> exit

可以看到各个节点已经连接上了,至此,mysql cluster配置完成。

(五)关闭

mysql cluster的关闭也很简单,只需在ndb_mgm> 提示符下输入 shutdown即可,这时会显示各节点的关闭信息,再输入exit即可退出ndb_mgm管理,回到shell中。虽然mysql cluster 关闭了,但是SQL节点的mysql服务并不会停止的。接下来就可以做各种试验了。

五、测试

(一)在一个SQL节点新建一个测试数据库,jedy_db
[root@DB-node1 mysql]# /usr/local/mysql/bin/mysql 
mysql> create database jedy_db; 
Query OK, 1 row affected (0.10 sec) 
mysql> show databases; 
+--------------------+ 
| Database           | 
+--------------------+ 
| information_schema | 
| jedy_db            | 
| mysql              | 
| ndb_2_fs           | 
| ndbinfo            | 
| performance_schema | 
| test               | 
+--------------------+ 
7 rows in set (0.05 sec) 
mysql> \q 
Bye 
[root@DB-node1 mysql]#

(二)在另一个SQL节点查看
[root@DB-node2 mysql]# /usr/local/mysql/bin/mysql 
mysql> show databases; 
+--------------------+ 
| Database           | 
+--------------------+ 
| information_schema | 
| jedy_db            | 
| mysql              | 
| ndb_3_fs           | 
| ndbinfo            | 
| performance_schema | 
| test               | 
+--------------------+ 
7 rows in set (0.06 sec) 
mysql> \q 
Bye 
[root@DB-node2 mysql]#

所有配置完成