Mysql cluster技术概览

wKiom1g2jhjDhubiAAHNYCLGxHk871.png-wh_50 

DB Management Server:管理服务器主要用于管理cluster中的其他类型节点(Data Node和SQL Node),通过它可以配置Node信息,启动和停止Node。 SQL Node:在MySQL Cluster中,一个SQL Node就是一个使用NDB引擎的mysql server进程,用于供外部应用提供集群数据的访问入口。Data Node:用于存储集群数据;系统会尽量将数据放在内存中。

 

 Cluster只支持nbd这种存储引擎,对内存要求很高,在建表的时候必须要指定存储引擎为nbd

 

Mysql cluster安装

实验拓扑

管理机 ip 10.1  id 1  process ndb_mgmd

Sql1   10.10     10          mysqld

Sql2   10.11     11          mysqld

Data1  10.20     20          ndbd

Data2  10.21     21          ndbd

 

 

初始配置(所有节点)

Ip,iptables,selinux,hosts

 

Sql nodes   只有这节点需要安装mysql,群集软件就行了

Data nodes      只需要拷贝一个进程文件过来就行了

Managemnet nodes 只需要拷贝一个进程文件过来就行了

 

 

 

 

Mysql cluster初始配置

Data节点和sql节点配置一模一样,只需要配置一个然后拷贝过去就行了

管理节点要单独配置

 

Mysql cluster初始启动

首先必须先启用管理节点  ndb_mgmd -f /var/lib/mysql-cluster/config.ini

然后是数据节点             ndbd

最后是mysql节点   /etc/init.d/mysqld.server start

 

Mysql cluster测试

测试一:所有节点均正常,写入或查询

用户访问分别两台sql节点,创建数据库,表(存储引擎为ndbcluster)

Create table t1(id int) engine=ndbcluster;

 

 

测试二:停用master数据节点

 

测试三:停用一个sql节点

 

Mysql cluster安全关闭及重启

 

 

 

实操演练:

安装前初始化工作:

Ip,iptables,selinux,hosts

 

一定保障每一个节点都没有相应的mysql进程在运行,并且不能在开机自启动

Ps aux|grep mysql

Kill -9 对应的进程号

Chkconfig msyqld off

Mv /etc/my.cnf /etc/my.cnf.old   //保障不要让以前的配置文件干扰影响新配置文件

 

 

安装群集软件,只需要在sql节点安装即可

Sqlsql2

将下载好的软件拷贝到sql节点电脑上,最好下载二进制包,直接解压创建一些对应的目录就可以使用了

 

Tar -xzf  mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86-64.tar.gz -C /usr/local

Ln -s /usr/local/mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86-64/ /usr/lcoal/mysql  //做连接是为了便于管理

 

Cd /usr/lcoal/mysql-cluster   //因为sql节点需要接受用户的访问,所以需要做数据库初始化工作和创建授权表

Ls

Scripts/mysql_install_db  --user=mysql  //初始化

Chown -R root

Chown -R mysql data

Chgrp -R  mysql  //改为除data目录外所有目录属主为root,属组为mysql

Cp support-files/mysql.server /etc/rc.d/init.d/mysqld

Chkconfig  --add mysqld

Chkconifg mysqld on   //注意现在不能启动,因为启动是有顺序的,到此为止sql节点安装完成

 

 

Data节点安装:只需要把任意sql节点的一个进程文件拷贝过来使用即可

同样在sql节点电脑上操作

Rsync -av /usr/local/mysql-cluster/bin/ndbd 192.168.10.20:/usr/local/bin/

Rsync -av /usr/local/mysql-cluster/bin/ndbd 192.168.10.21:/usr/local/bin/

Rsync -av /usr/local/mysql-cluster/bin/ndbmtd 192.168.10.20:/usr/local/bin/  //多线程进程

Rsync -av /usr/local/mysql-cluster/bin/ndbmtd 192.168.10.21:/usr/local/bin/

 

 

data节点上将刚刚拷贝过来的目录文件加上可执行权限

Chmod a+x /usr/local/bin/ndb*

 

 

管理节点安装:只需要把任意sql节点的一个进程文件拷贝过来使用即可

同样在sql节点电脑上操作

Rsync -av /usr/local/mysql-cluster/bin/ndb_mgm*  192.168.10.1:/usr/local/bin/

 

在管理节点上将刚刚拷贝过来的目录文件加上可执行权限

Chmod a+x /usr/local/bin/ndb_mgm*

Mkdir -p /usr/local/mysql/mysql-cluster  //这个目录用来存放日志信息的

 

 

配置Data节点和sql节点配置一模一样,只需要配置一个然后拷贝过去就行了

管理节点要单独配置

Sql上配置

Vim /etc/my.cnf  //这是一个新文件,其实就是告诉它以mysqldNdbcluster

存储引擎方式启动,告诉它管理节点是谁就可以了

[mysqld]

Ndbcluster

 

[mysql_cluster]

Ndb_connectstring=192.168.10.1

 

保存退出

 

Cd  /   //将配置文件分别拷贝到其他服务器节点就可以了

Rsync -av /etc/my.cnf 192.168.10.11:/etc/

Rsync -av /etc/my.cnf 192.168.10.20:/etc/

Rsync -av /etc/my.cnf 192.168.10.21:/etc/

 

 

 

管理节点配置

Mkdir /var/lib/mysql-cluster   //用来存放配置目录的

Cd /var/lib/mysql-cluster  //进入到这个目录创建一个ini文件

Vim config.ini  配置一个数据节点的数量,定义数据节点的内存大小,索引所使用的内存,tcp对外提供服务的端口,加上所有节点信息

NoOfReplicas=2

DataMemory=100M

IndexMemory=100M

 

[tcp_default]

Portnumber=3306

 

[ndb_mgmd]

Id=1

Hostname=192.168.10.1

Datadir=/var/lib/mysql-cluster     //存放日志

 

[ndbd]

Id=20

Hostname=192.168.10.20

Datadir=/usr/local/mysql/data  //要和数据节点一致

 

 

[ndbd]

Id=21

Hostname=192.168.10.21

Datadir=/usr/local/mysql/data  //要和数据节点一致

 

[mysqld]

Id=10

Hostname=192.168.10.10

 

 

[mysqld]

Id=10

Hostname=192.168.10.11

 

保存退出

 

data节点上创建刚才管理节点上配置文件中的文件

data节点上操作

Mkdir -p /usr/local/mysql/data

 

 

 

Mysql cluster初始启动

首先必须先启用管理节点  ndb_mgmd -f /var/lib/mysql-cluster/config.ini

然后是数据节点             ndbd

最后是mysql节点   /etc/init.d/mysqld.server start

在管理节点上:

ndb_mgmd -f /var/lib/mysql-cluster/config.ini

数据节点:ndnd

Sql节点:service mysqld start

Mysql cluster测试

测试一:所有节点均正常,写入或查询

用户访问分别两台sql节点,创建数据库,表(存储引擎为ndbcluster)

Create table t1(id int) engine=ndbcluster;

Grant all *.* to root@% identtified by 123;   //创建授权账号

 

客户端测试

Mysql -h 192.168.10.10 -uroot -p123

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

Create database bbs;

Create table bbs.t1(id int,name varchar(30));

Alter tabel bbs.t1 engine=nbdcluster;  //存储引擎必须是nbdcluster

Insert into bbs.t1 values(1,luliechu);

 

然后连接到另一台主机上看一下数据是否是一致的

Mysql -h 192.168.10.11 -uroot -p123

Select * from bbs.t1

 

 

 

 

 

测试二:停用master数据节点

Ndb_mgm

Show

 

测试三:停用一个sql节点

 

Mysql cluster安全关闭的顺序跟启动的时候刚好相反及重启

管理节点 ndb_mgm -e shutdown   //关闭整个集群

数据节点

Sql节点

 

 

 

注意事项:所有群集节点都不要安装和启动mysql server