MyCAT常用分片规则之分片枚举
MyCAT支持多种分片规则,下面测试的这种是分片枚举。适用场景,列值的个数是固定的,譬如省份,月份等。
在这里,需定义三个值,规则均是在rule.xml中定义。
1. tableRule
2. function
3. mapFile
首先,定义tableRule,
<tableRule name="sharding-by-intfile-test"> <rule> <columns>province</columns> <algorithm>hash-int-test</algorithm> </rule> </tableRule>
其中,sharding-by-intfile-test是规则名,会在schema.xml中用到。
columns指的是对省份进行分片。
algorithm是算法名,该算法必须在function中定义。
其次,定义function,
<function name="hash-int-test" class="org.opencloudb.route.function.PartitionByFileMap"> <property name="mapFile">partition-hash-int-test.txt</property> <property name="type">1</property> <property name="defaultNode">0</property> </function>
其中,mapFile指的是配置文件名
type默认值为0,0表示Integer,非零表示String。因为我接下来的测试是基于省份分片,所以需type指定为1。
defaultNode 默认节点:小于0表示不设置默认节点,大于等于0表示设置默认节点
默认节点的作用:枚举分片时,如果碰到不识别的枚举值,就让它路由到默认节点。如果不配置默认节点(defaultNode值小于0表示不配置默认节点),碰到不识别的枚举值就会报错,like this:can’t find datanode for sharding column:column_name val:ffffffff
第三、在rule.xml当前目录下创建partition-hash-int-test.txt文件,定义枚举的规则
hubei=0 tianjin=1 guangdong=2
其中,hubei会被分发到第一个节点中,tianjin分发被第二个节点中,guangdong第三个节点中。
现在开始测试,
首先,在shema.xml定义表的分片规则
<table name="t_vote" dataNode="dn2,dn1,dn3" rule="sharding-by-intfile-test" />
登录MyCAT创建表
# mysql -utest -ptest -h127.0.0.1 -P8066 -DTESTDB
mysql> create table t_vote(id varchar(10),province varchar(10)); Query OK, 0 rows affected (0.04 sec) mysql> insert into t_vote(id,province) values(database(),'hubei'); Query OK, 1 row affected (0.01 sec) mysql> insert into t_vote(id,province) values(database(),'tianjin'); Query OK, 1 row affected (0.01 sec) mysql> insert into t_vote(id,province) values(database(),'guangdong'); Query OK, 1 row affected (0.01 sec) mysql> insert into t_vote(id,province) values(database(),'shandong'); Query OK, 1 row affected (0.01 sec) mysql> select * from t_vote; +------+-----------+ | id | province | +------+-----------+ | db1 | tianjin | | db2 | hubei | | db2 | shandong | | db3 | guangdong | +------+-----------+ 4 rows in set (0.03 sec)
hubei之所以是db2,因为它对应的是第一个节点,而在schema.xml定义t_vote表时,第一个节点即是dn2。
shandong之所以是在db2,因为它并没有在分片规则中定义,所以会被分到默认节点,默认节点defaultNode的是0,即第一个节点。
总结:
1. 刚开始没有指定function中type的值,即<property name="type">1</property>。导致insert时报以下错误,因为默认的分片类型是integer,而不是string。
mysql> insert into t_vote(id,province) values(database(),'hubei'); ERROR 1064 (HY000): For input string: "hubei"
2. 如果没有指定function中defaultNode值,则插入不识别的枚举值时,报以下错误:
mysql> insert into t_vote(id,province) values(database(),'shandong'); ERROR 1064 (HY000): can't find any valid datanode :T_VOTE -> PROVINCE -> shandong
3. MyCAT其实还支持动态加载功能
譬如,我将defaultNode的值定义到partition-hash-int-test.txt中,哈哈,这点也是支持的。当然,前提是注释掉function中defaultNode值,不然function中的defaultNode值会覆盖掉partition-hash-int-test.txt中DEFAULT_NODE值。
hubei=0 tianjin=1 guangdong=2 DEFAULT_NODE=2
登录到MyCAT 9066管理端口
# mysql -utest -ptest -h127.0.0.1 -P9066
mysql> reload @@config; Query OK, 1 row affected (0.03 sec) Reload config success
登录到MyCAT 8066端口
mysql> insert into t_vote(id,province) values(database(),'shanxi'); Query OK, 1 row affected (0.00 sec) mysql> select * from t_vote; +------+-----------+ | id | province | +------+-----------+ | db1 | tianjin | | db2 | hubei | | db2 | shandong | | db3 | guangdong | | db3 | shanxi | +------+-----------+ 5 rows in set (0.01 sec)
4. 该规则有个问题,如果中途修改了defaultNode的值,譬如,我刚开始设置的是0,插入了shandong这个值,现在修改为2。
mysql> select * from t_vote; +------+-----------+ | id | province | +------+-----------+ | db1 | tianjin | | db3 | guangdong | | db2 | shanxi | | db2 | hubei | | db2 | shandong | +------+-----------+ 5 rows in set (0.01 sec) mysql> select * from t_vote where province='shandong'; Empty set (0.00 sec)
根据where条件无法检索出原来插入的值。
日志中显示的信息如下:
01/24 15:17:50.028 DEBUG [$_NIOREACTOR-0-RW] (EnchachePool.java:76) -SQLRouteCache miss cache ,key:TESTDBselect * from t_vote where province='shandong' 01/24 15:17:50.029 DEBUG [$_NIOREACTOR-0-RW] (EnchachePool.java:59) -SQLRouteCache add cache ,key:TESTDBselect * from t_vote where province='shandong' value:select * from t_vote where province='shandong', route={ 1 -> dn3{SELECT * FROM t_vote WHERE province = 'shandong' LIMIT 100} }
dn3是现在的defaultNode=2所对应的节点。