1.引言

MyCat中的路由结果是通过分片字段和分片方法来确定的,如果查询条件中有 id 字段的情况还好,查询将会落到某个具体的分片。

如果查询没有分片的字段,会向所有的db都会查询一遍,让后封装结果级给客户端。

那么实际情况中,在Mycat中分片是如何实现的呢?下面来举个例子。

需求:

  • 数据库中主要存放“省”的信息,如广东省要放到广东省数据库,浙江省要放到浙江省数据。。。每个省都有自己的数据库。现在利用Mycat来实现不同省存放到不同的数据库功能。

2.分片枚举法实现

在服务器192.168.162.132新建四个示例数据库:gd_db(广东数据库)、zj_db(浙江数据库)、bj_db(北京数据库)、other_db(其它省份数据库)。每个数据库均新建表intro_tb,内容如下,现在要求在Mycat根据字段name(省份名称)来存放到对应的数据库:

字段 解析
name 省份名称
createTime 创建日期

数据库系列课程(06)-MyCat分片按省操作数据库例子_# 数据库技术

1. 配置分片规则

A . partition-hash-int.txt(分片配置文件):

guangdong=0
beijing=1
zhejiang=2

B. rule.xml(分片配置文件):

<?xml version="1.0" encoding="UTF-8"?>
<!-- - - Licensed under the Apache License, Version 2.0 (the "License");
    - you may not use this file except in compliance with the License. - You
    may obtain a copy of the License at - - http://www.apache.org/licenses/LICENSE-2.0
    - - Unless required by applicable law or agreed to in writing, software -
    distributed under the License is distributed on an "AS IS" BASIS, - WITHOUT
    WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. - See the
    License for the specific language governing permissions and - limitations
    under the License. -->
<!DOCTYPE mycat:rule SYSTEM "rule.dtd">
<mycat:rule xmlns:mycat="http://io.mycat/">
 
    <tableRule name="role2">
             <rule>
                  <columns>name</columns>
                  <algorithm>hash-int</algorithm>
              </rule>
    </tableRule>
	
	<function name="hash-int" class="io.mycat.route.function.PartitionByFileMap">
		<property name="mapFile">partition-hash-int.txt</property>
		<property name="type">1</property>
		<property name="defaultNode">3</property>
	</function>
	
</mycat:rule>

解析:

  1. 在rule.xml定义分片规则,名字为“role2”,以表中列名为name来分片。具体的分片算法方法名为“hash-int”
  2. 分片算法“hash-int”,使用的是“分片枚举算法”,声明class=“io.mycat.route.function.PartitionByFileMap”。
  3. 里面的具体name对应的数据库节点枚举看“partition-hash-int.txt”文件,默认节点为3。(每个数据库节点对应的节点号看schema.xml文件

2. 配置schema.xml

内容如下:

<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">
    <!-- TESTDB1 是mycat的逻辑库名称,链接需要用的 -->
    <schema name="mycat_testdb" checkSQLschema="false" sqlMaxLimit="100" dataNode="dn1">
	 
	  <table name="intro_db"  dataNode="dn1,dn2,dn3,dn4" rule="role2" /> 
	
	</schema>
    
    <!-- database 是MySQL数据库的库名 -->
    <dataNode name="dn1" dataHost="localhost1" database="gd_db" />
	<dataNode name="dn2" dataHost="localhost1" database="bj_db" />
	<dataNode name="dn3" dataHost="localhost1" database="zj_db" />
	<dataNode name="dn4" dataHost="localhost1" database="other_db" />
    
    <!--
    dataNode节点中各属性说明:
	    name:指定逻辑数据节点名称;
	    dataHost:指定逻辑数据节点物理主机节点名称;
	    database:指定物理主机节点上。如果一个节点上有多个库,可使用表达式db$0-99,     表示指定0-99这100个数据库;
	 -->
    

    <dataHost name="localhost1" maxCon="1000" minCon="10" balance="3" writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">
        <heartbeat>select user()</heartbeat>
        <!-- 可以配置多个主从 -->
        <writeHost host="hostM1" url="192.168.162.132:3306" user="root" password="123456">
            <!-- 可以配置多个从库 -->
            <readHost host="hostS2" url="192.168.162.133:3306" user="root" password="123456" />
        </writeHost>
    </dataHost>
 <!--
 	dataHost 节点中各属性说明:
        name:物理主机节点名称;
        maxCon:指定物理主机服务最大支持1000个连接;
        minCon:指定物理主机服务最小保持10个连接;
        writeType:指定写入类型;
            0,只在writeHost节点写入;
            1,在所有节点都写入。慎重开启,多节点写入顺序为默认写入根据配置顺序,第一个挂掉切换另一个;
        dbType:指定数据库类型;
        dbDriver:指定数据库驱动;
        balance:指定物理主机服务的负载模式。
            0,不开启读写分离机制;
            1,全部的readHost与stand by writeHost参与select语句的负载均衡,简单的说,当双主双从模式(M1->S1,M2->S2,并且M1与 M2互为主备),正常情况下,M2,S1,S2都参与select语句的负载均衡;
            2,所有的readHost与writeHost都参与select语句的负载均衡,也就是说,当系统的写操作压力不大的情况下,所有主机都可以承担负载均衡;
 -->
</mycat:schema>

3. 配置server.xml

读写分离,配置读写数据库:

<?xml version="1.0" encoding="UTF-8"?>
<!-- - - Licensed under the Apache License, Version 2.0 (the "License"); 
	- you may not use this file except in compliance with the License. - You 
	may obtain a copy of the License at - - http://www.apache.org/licenses/LICENSE-2.0 
	- - Unless required by applicable law or agreed to in writing, software - 
	distributed under the License is distributed on an "AS IS" BASIS, - WITHOUT 
	WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. - See the 
	License for the specific language governing permissions and - limitations 
	under the License. -->
<!DOCTYPE mycat:server SYSTEM "server.dtd">
<mycat:server xmlns:mycat="http://io.mycat/">
   

   <!-- 读写都可用的用户 -->
    <user name="root" defaultAccount="true">
        <property name="password">123456</property>
        <property name="schemas">mycat_testdb</property>

        <!-- 表级 DML 权限设置 -->
        <!--        
        <privileges check="false">
            <schema name="TESTDB" dml="0110" >
                <table name="tb01" dml="0000"></table>
                <table name="tb02" dml="1111"></table>
            </schema>
        </privileges>       
         -->
    </user>

    <!-- 只读用户 -->
    <user name="user">
        <property name="password">user</property>
        <property name="schemas">mycat_testdb</property>
        <property name="readOnly">true</property>
    </user>

</mycat:server>

4. 测试

partition-hash-int.txtrule.xmlscheme.xml以及server.xml文件上传到Mycat下的config目录,重启Mycat服务器。

1.启动Mycat服务器

./mycat start

2.插入广东数据

insert into intro_tb (name,createTime) VALUES ('guangdong','2019-12-23 15:00:00');

数据库系列课程(06)-MyCat分片按省操作数据库例子_# 数据库技术_02
3.查看数据库

可以看到广东数据库有插入了数据了
数据库系列课程(06)-MyCat分片按省操作数据库例子_# 数据库技术_03
其它几个数据库均无数据:
数据库系列课程(06)-MyCat分片按省操作数据库例子_# 数据库技术_04
数据库系列课程(06)-MyCat分片按省操作数据库例子_# 数据库技术_05
数据库系列课程(06)-MyCat分片按省操作数据库例子_# 数据库技术_06
4.再次插入北京数据库

insert into intro_tb (name,createTime) VALUES ('beijing','2019-12-23 15:15:00');

数据库系列课程(06)-MyCat分片按省操作数据库例子_# 数据库技术_07
结论和前面一样,只有北京数据库插入了数据了,其它数据库都没有插入,此处不再详述。