温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

MyCat分库分表--实战02--分片枚举

发布时间:2020-08-15 12:05:40 来源:ITPUB博客 阅读:199 作者:StevenBeijing 栏目:MySQL数据库

项目环境: 

192.168.8.30  mycat

192.168.8.31  node1

192.168.8.32  node2

192.168.8.33  node3

三个节点MySQL均为单实例

一、创建测试数据

node1

 create database testdb01; create database testdb02; create database testdb03; create database testdb04; create database testdb05; create database testdb06; create database testdb07; create database testdb08; create database testdb09; create database testdb10; create database testdb11; create database testdb12; 

node2

 create database testdb13; create database testdb14; create database testdb15; create database testdb16; create database testdb17; create database testdb18; create database testdb19; create database testdb20; create database testdb21; create database testdb22; create database testdb23; create database testdb24; 

node3

 create database testdb25; create database testdb26; create database testdb27; create database testdb28; create database testdb29; create database testdb30; create database testdb31; create database testdb32; create database testdb33; create database testdb34; create database testdb35; 

二、配置schema.xml

 <?xml version="1.0"?> <!DOCTYPE mycat:schema SYSTEM "schema.dtd"> <mycat:schema xmlns:mycat="http://io.mycat/">         <schema name="mycatdb" checkSQLschema="false" sqlMaxLimit="100">             <table name="user01" dataNode="dn$1-35" rule="sharding-by-intfile-mycatdb-kk_user"></table>         </schema>	<!-- <dataNode name="dn1$0-743" dataHost="localhost1" database="db$0-743"	/> -->         <dataNode name="dn1" dataHost="node1" database="testdb01" />         <dataNode name="dn2" dataHost="node1" database="testdb02" />         <dataNode name="dn3" dataHost="node1" database="testdb03" />         <dataNode name="dn4" dataHost="node1" database="testdb04" />         <dataNode name="dn5" dataHost="node1" database="testdb05" />         <dataNode name="dn6" dataHost="node1" database="testdb06" />         <dataNode name="dn7" dataHost="node1" database="testdb07" />         <dataNode name="dn8" dataHost="node1" database="testdb08" />         <dataNode name="dn9" dataHost="node1" database="testdb09" />         <dataNode name="dn10" dataHost="node1" database="testdb10" />         <dataNode name="dn11" dataHost="node1" database="testdb11" />         <dataNode name="dn12" dataHost="node1" database="testdb12" />         <dataNode name="dn13" dataHost="node2" database="testdb13" />         <dataNode name="dn14" dataHost="node2" database="testdb14" />         <dataNode name="dn15" dataHost="node2" database="testdb15" />         <dataNode name="dn16" dataHost="node2" database="testdb16" />         <dataNode name="dn17" dataHost="node2" database="testdb17" />         <dataNode name="dn18" dataHost="node2" database="testdb18" />         <dataNode name="dn19" dataHost="node2" database="testdb19" />         <dataNode name="dn20" dataHost="node2" database="testdb20" />         <dataNode name="dn21" dataHost="node2" database="testdb21" />         <dataNode name="dn22" dataHost="node2" database="testdb22" />         <dataNode name="dn23" dataHost="node2" database="testdb23" />         <dataNode name="dn24" dataHost="node2" database="testdb24" />         <dataNode name="dn25" dataHost="node3" database="testdb25" />         <dataNode name="dn26" dataHost="node3" database="testdb26" />         <dataNode name="dn27" dataHost="node3" database="testdb27" />         <dataNode name="dn28" dataHost="node3" database="testdb28" />         <dataNode name="dn29" dataHost="node3" database="testdb29" />         <dataNode name="dn30" dataHost="node3" database="testdb30" />         <dataNode name="dn31" dataHost="node3" database="testdb31" />         <dataNode name="dn32" dataHost="node3" database="testdb32" />         <dataNode name="dn33" dataHost="node3" database="testdb33" />         <dataNode name="dn34" dataHost="node3" database="testdb34" />         <dataNode name="dn35" dataHost="node3" database="testdb35" />         <!--<dataNode name="dn4" dataHost="sequoiadb1" database="SAMPLE" />	 <dataNode name="jdbc_dn1" dataHost="jdbchost" database="db1" />	<dataNode	name="jdbc_dn2" dataHost="jdbchost" database="db2" />	<dataNode name="jdbc_dn3" 	dataHost="jdbchost" database="db3" /> -->	<dataHost name="node1" maxCon="1000" minCon="10" balance="1"                           writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">                 <heartbeat>select user()</heartbeat>                 <!-- can have multi write hosts -->                 <writeHost host="192.168.8.31" url="192.168.8.31:3306" user="root"  password="mysql"></writeHost>         </dataHost>         <dataHost name="node2" maxCon="1000" minCon="10" balance="1"                           writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">                 <heartbeat>select user()</heartbeat>                 <!-- can have multi write hosts -->                 <writeHost host="192.168.8.32" url="192.168.8.32:3306" user="root"  password="mysql"></writeHost>         </dataHost>         <dataHost name="node3" maxCon="1000" minCon="10" balance="1"                           writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">                 <heartbeat>select user()</heartbeat>                 <!-- can have multi write hosts -->                 <writeHost host="192.168.8.33" url="192.168.8.33:3306" user="root"  password="mysql"></writeHost>         </dataHost> </mycat:schema> 

三、配置rule.xml

 <mycat:rule xmlns:mycat="http://io.mycat/">         <tableRule name="sharding-by-intfile-mycatdb-kk_user">                 <rule>                         <columns>province</columns>                         <algorithm>hash-int</algorithm>                 </rule>         </tableRule>         <function name="hash-int" class="io.mycat.route.function.PartitionByFileMap">                 <property name="mapFile">partition-hash-int-mycatdb-kk_user.txt</property>                 <property name="type">1</property>                 <property name="defaultNode">0</property>         </function> </mycat:rule> 

四、配置partition-hash-int-mycatdb-kk_user.txt

 北京市=0 上海市=1 云南省=2 内蒙古=3 贵州省=4 重庆市=5 台湾省=6 吉林省=7 四川省=8 天津市=9 宁夏省=10 安徽省=11 山东省=12 山西省=13 广东省=14 广西省=15 新疆省=16 江苏省=17 江西省=18 河北省=19 河南省=20 浙江省=21 海南省=22 湖北省=23 湖南省=24 澳门=25 甘肃省=26 福建省=27 西藏=28 辽宁省=29 陕西省=30 青海省=31 香港=32 黑龙江省=33 DEFAULT_NODE=34 

五、配置server.xml

 <user name="root" defaultAccount="true">                 <property name="password">mysql</property>                 <property name="schemas">mycatdb</property> </user> 

六、启动mycat

 /usr/local/mycat/bin/mycat start 

查看mycat日志

 STATUS | wrapper  | 2018/11/22 10:07:48 | --> Wrapper Started as Daemon STATUS | wrapper  | 2018/11/22 10:07:48 | Launching a JVM... INFO   | jvm 1    | 2018/11/22 10:07:48 | OpenJDK 64-Bit Server VM warning: ignoring option MaxPermSize=64M; support was removed in 8.0 INFO   | jvm 1    | 2018/11/22 10:07:50 | Wrapper (Version 3.2.3) http://wrapper.tanukisoftware.org INFO   | jvm 1    | 2018/11/22 10:07:50 |   Copyright 1999-2006 Tanuki Software, Inc.  All Rights Reserved. INFO   | jvm 1    | 2018/11/22 10:07:50 |  INFO   | jvm 1    | 2018/11/22 10:07:57 | MyCAT Server startup successfully. see logs in logs/mycat.log 

七、登录mysql进行数据验证

 mysql -uroot -pmysql -P8066 -h292.168.8.30 
 mysql> show databases; +----------+ | DATABASE | +----------+ | mycatdb  | +----------+ 1 row in set (0.01 sec) mysql> use mycatdb Reading table information for completion of table and column names You can turn off this feature to get a quicker startup with -A Database changed mysql> show tables; +-------------------+ | Tables in mycatdb | +-------------------+ | user01            | +-------------------+ 1 row in set (0.01 sec) 

因为schema.xml里边配置了table的属性,所以登录MySQL会看到这张表,但是查看不到数据,也无法用drop table直接删除。

第一次删除此表需要用命令DROP TABLE IF EXISTS `user01`;  否则会提示找不到此表。

创建表,需要含province字段

 mysql> DROP TABLE IF EXISTS `user01`;  Query OK, 0 rows affected (0.84 sec) mysql> create table user01(province varchar(40)); Query OK, 0 rows affected (1.74 sec) 

向user01表插入测试数据,每个省份插入20条记录

在node1查看部分数据

 mysql> select count(*) ,province from testdb01.user01 group by province; +----------+-----------+ | count(*) | province  | +----------+-----------+ |       20 | 北京市    | +----------+-----------+ 1 row in set (0.01 sec) mysql> select count(*) ,province from testdb05.user01 group by province; +----------+-----------+ | count(*) | province  | +----------+-----------+ |       20 | 贵州省    | +----------+-----------+ 1 row in set (0.00 sec) mysql> select count(*) ,province from testdb12.user01 group by province; +----------+-----------+ | count(*) | province  | +----------+-----------+ |       20 | 安徽省    | +----------+-----------+ 1 row in set (0.00 sec) 

在node2查看部分数据

 mysql> select count(*) ,province from testdb16.user01 group by province; +----------+-----------+ | count(*) | province  | +----------+-----------+ |       20 | 广西省    | +----------+-----------+ 1 row in set (0.00 sec) mysql> select count(*) ,province from testdb19.user01 group by province; +----------+-----------+ | count(*) | province  | +----------+-----------+ |       20 | 江西省    | +----------+-----------+ 1 row in set (0.00 sec) mysql> select count(*) ,province from testdb22.user01 group by province; +----------+-----------+ | count(*) | province  | +----------+-----------+ |       20 | 浙江省    | +----------+-----------+ 1 row in set (0.00 sec) 

在node3查看部分数据

 mysql> select count(*) ,province from testdb25.user01 group by province; +----------+-----------+ | count(*) | province  | +----------+-----------+ |       20 | 湖南省    | +----------+-----------+ 1 row in set (0.00 sec) mysql> select count(*) ,province from testdb30.user01 group by province; +----------+-----------+ | count(*) | province  | +----------+-----------+ |       20 | 辽宁省    | +----------+-----------+ 1 row in set (0.01 sec) mysql> select count(*) ,province from testdb33.user01 group by province; +----------+----------+ | count(*) | province | +----------+----------+ |       20 | 香港     | +----------+----------+ 1 row in set (0.00 sec) 

八、查看各个分片的大小

node1

 mysql> select table_schema,table_name as "Tables",ROUND(((data_length +     -> index_length) / 1024 ), 2) "Size in KB"     -> from information_schema.TABLES     -> where TABLE_NAME = "user01"     -> order by (data_length + index_length) desc; +--------------+--------+------------+ | table_schema | Tables | Size in KB | +--------------+--------+------------+ | testdb09     | user01 |      16.00 | | testdb08     | user01 |      16.00 | | testdb07     | user01 |      16.00 | | testdb06     | user01 |      16.00 | | testdb05     | user01 |      16.00 | | testdb04     | user01 |      16.00 | | testdb03     | user01 |      16.00 | | testdb02     | user01 |      16.00 | | testdb12     | user01 |      16.00 | | testdb01     | user01 |      16.00 | | testdb11     | user01 |      16.00 | | testdb10     | user01 |      16.00 | +--------------+--------+------------+ 12 rows in set (0.00 sec) 

node2

 mysql> select table_schema,table_name as "Tables",ROUND(((data_length +     -> index_length) / 1024 ), 2) "Size in KB"     -> from information_schema.TABLES     -> where TABLE_NAME = "user01"     -> order by (data_length + index_length) desc; +--------------+--------+------------+ | table_schema | Tables | Size in KB | +--------------+--------+------------+ | testdb18     | user01 |      16.00 | | testdb17     | user01 |      16.00 | | testdb16     | user01 |      16.00 | | testdb15     | user01 |      16.00 | | testdb14     | user01 |      16.00 | | testdb24     | user01 |      16.00 | | testdb13     | user01 |      16.00 | | testdb23     | user01 |      16.00 | | testdb22     | user01 |      16.00 | | testdb21     | user01 |      16.00 | | testdb20     | user01 |      16.00 | | testdb19     | user01 |      16.00 | +--------------+--------+------------+ 12 rows in set (0.00 sec) 

node3

 mysql> select table_schema,table_name as "Tables",ROUND(((data_length +     -> index_length) / 1024 ), 2) "Size in KB"     -> from information_schema.TABLES     -> where TABLE_NAME = "user01"     -> order by (data_length + index_length) desc; +--------------+--------+------------+ | table_schema | Tables | Size in KB | +--------------+--------+------------+ | testdb26     | user01 |      16.00 | | testdb25     | user01 |      16.00 | | testdb35     | user01 |      16.00 | | testdb34     | user01 |      16.00 | | testdb33     | user01 |      16.00 | | testdb32     | user01 |      16.00 | | testdb31     | user01 |      16.00 | | testdb30     | user01 |      16.00 | | testdb29     | user01 |      16.00 | | testdb28     | user01 |      16.00 | | testdb27     | user01 |      16.00 | +--------------+--------+------------+ 11 rows in set (0.00 sec) 

到此,分片枚举结束。



向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI