1.准备四台MySQL服务器以及一台MyCat服务器
我这里的MyCat服务器搭建在第一台MySQL服务器上,所以只有4台服务器
M1 192.168.159.128 主库1 Mycat
S1 192.168.159.129 从库1
M2 192.168.159.130 主库2
S2 192.168.159.131 从库2
注:如果MySQL是在VMWare中克隆出来的,那么要修改MySQL的auto.cnf文件,让他们不一样
然后上四台机器的MySQL配置文件
M1 让server-id唯一即可 log-bin开启二进制日志 log-slave-updates这个的作用主要是为了当M1的数据库作为M2的从数据库时,M2的数据发生更改时,作为从数据库的M1也会发生相应改变
server-id=1 log-slave-updates log-bin=mysql-bin
S1
server-id=2
M2
server-id=3 log-slave-updates log-bin=mysql-bin
S2
server-id=4
2.开启MySQL主从同步
首先开启M1的MySQL,连上MySQL之后
然后M1要同步的数据库为M2和S1,因为M1数据库和M2互为主从,所以也要配置M2为M1的从数据库
在M2和S1的数据库上进行如下操作:
stop slave; change master to master_host=‘192.168.159.128‘,master_user=‘root‘,master_password=‘123456‘,master_log_file=‘mysql-bin.000009‘,master_log_pos=154; start slave;
注意这里的master_log_file和master_log_pos的值要跟前面M1得到的值保持一致
接下来是M2要同步的数据库,分别是S2,M1
首先在M2上获取信息
然后在S2和M1上面进行如下操作
stop slave; change master to master_host=‘192.168.159.130‘,master_user=‘root‘,master_password=‘123456‘,master_log_file=‘mysql-bin.000009‘,master_log_pos=7367; start slave;
最后查看各个服务器的状态:
如果四台服务器上面的slave-io-running和slave-sql-running的值都为yes的话,那么基本上就ok了,这时候我们MySQL的主从同步已经实现了。
然后我们创建一个数据库ouyang,在里面创建一个表employee
create database ouyang; create table employee(id int not null primary key,name varchar(100),sharding_id int not null);
3.MyCat实现读写分离
这里MyCat的安装就不介绍了,我这里使用的是MyCat1.6版本
直接上配置文件了,分别是schema.xml,server.xml,rule.xml,以及一个我们要使用到的partition-hash-int.txt文件
schema文件:
<!-- schema标签 name表示在mycat实例中的逻辑库 简单的说就是你在mycat中看到的数据库名称 checkSQLschema表示是否去除逻辑库名,就是操作的时候带不带JameMyCatSchema. SqlMaxLimit为默认的分页数-->
<schema name="JamesMycatSchema" checkSQLschema="false" sqlMaxLimit="100">
<!-- name属性表示mycat中的表名 primarykey为主键 datanode是数据节点,来自dataNode标签的name值绑定,rule是数据分片的规则 sharding-by-intfile为分片枚举 --> <table name="employee" primaryKey="ID" dataNode="dn4" rule="sharding-by-intfile" /> </schema>
<!-- dataNode标签 name就是分片的名字 datahost是指哪个数据库实例 database定义该分片属于哪个具体数据库实例上的具体库 --> <dataNode name="dn4" dataHost="localhost1" database="ouyang" />
<!-- datahost标签 数据库实例 name就是名称 maxCon指定每个读写实例连接池的最大连接,标签内嵌套的writeHost,readHost标签都会使用这个属性的值来实例化出连接池的最大连接数
指定每个读写实例连接池的最小连接,初始化连接池的大小
balance:负载均衡类型:
(1)balance="0", 不开启读写分离机制,所有读操作都发送到当前可用的writeHost 上。
(2)balance="1",全部的 readHost 与 stand by writeHost 参与 select 语句的负载均衡,简单的说,当双主双从模式(M1->S1,M2->S2,并且 M1 与 M2 互为主备),正常情况下,M2,S1,S2 都参与 select 语句的
负载均衡。
(3)balance="2",所有读操作都随机的在 writeHost、 readhost 上分发。
(4)balance="3",所有读请求随机的分发到 wiriterHost 对应的 readhost 执行,writerHost 不负担读压力,注意 balance=3 只在 1.4 及其以后版本有,1.3 没有。
writeType 属性
(1)writeType="0", 所有写操作发送到配置的第一个 writeHost,第一个挂了切到还生存的第二个riteHost,重新启动后已切换后的为准,切换记录在配置文件中:dnindex.properties.
(2)writeType="1",所有写操作都随机的发送到配置的 writeHost,1.5 以后废弃不推荐。
dbType指定后端连接的数据库类型,目前支持二进制的 mysql 协议,还有其他使用 JDBC 连接的数据库。例如:mongodb、 oracle、 spark 等。
dbDriver指定连接后端数据库使用的 Driver,目前可选的值有 native 和 JDBC。使用native 的话,因为这个值执行的是二进制的 mysql 协议,所以可以使用 mysql 和 maridb。其他类型的数据库则需要使用 JDBC 驱动来支持
switchType
-1 表示不自动切换
1 默认值,自动切换
2 基于 MySQL 主从同步的状态决定是否切换心跳语句为 show slave status
3 基于 MySQL galary cluster 的切换机制(适合集群)(1.4.1)心跳语句为 show status like ‘wsrep%’.-->
<dataHost name="localhost1" maxCon="1000" minCon="10" balance="1" writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100"> <heartbeat>select user()</heartbeat> <!-- can have multi write hosts --> <!--host 用于标识不同实例,一般 writeHost 我们使用*M1,readHost 我们用*S1。--> <!--url 后端实例连接地址。Native:地址:端口 JDBC:jdbc的url--> <!--password 后端存储实例需要的密码--> <!--user 后端存储实例需要的用户名字--> <!--weight 权重 配置在 readhost 中作为读节点的权重--> <!--usingDecrypt 是否对密码加密,默认0。具体加密方法看官方文档。--> <writeHost host="hostM1" url="192.168.159.128:3306" user="root" password="123456"> <readHost host="hostS1" url="192.168.159.129:3306" user="root" password="123456" /> </writeHost> <writeHost host="hostM2" url="192.168.159.130:3306" user="root" password="123456"> <readHost host="hostS2" url="192.168.159.131:3306" user="root" password="123456" /> </writeHost> </dataHost>
server.xml
<?xml version="1.0" encoding="UTF-8"?> <!-- - - Licensed under the Apache License, Version 2.0 (the "License"); - you may not use this file except in compliance with the License. - You may obtain a copy of the License at - - http://www.apache.org/licenses/LICENSE-2.0 - - Unless required by applicable law or agreed to in writing, software - distributed under the License is distributed on an "AS IS" BASIS, - WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. - See the License for the specific language governing permissions and - limitations under the License. --> <!DOCTYPE mycat:server SYSTEM "server.dtd"> <mycat:server xmlns:mycat="http://io.mycat/"> <system> <property name="useSqlStat">0</property> <!-- 1为开启实时统计、0为关闭 --> <property name="useGlobleTableCheck">0</property> <!-- 1为开启全加班一致性检测、0为关闭 --> <property name="sequnceHandlerType">2</property> <!-- <property name="useCompression">1</property>--> <!--1为开启mysql压缩协议--> <!-- <property name="fakeMySQLVersion">5.6.20</property>--> <!--设置模拟的MySQL版本号--> <!-- <property name="processorBufferChunk">40960</property> --> <!-- <property name="processors">1</property> <property name="processorExecutor">32</property> --> <!--默认为type 0: DirectByteBufferPool | type 1 ByteBufferArena--> <property name="processorBufferPoolType">0</property> <!--默认是65535 64K 用于sql解析时最大文本长度 --> <!--<property name="maxStringLiteralLength">65535</property>--> <!--<property name="sequnceHandlerType">0</property>--> <!--<property name="backSocketNoDelay">1</property>--> <!--<property name="frontSocketNoDelay">1</property>--> <!--<property name="processorExecutor">16</property>--> <!--<property name="serverPort">8066</property> <property name="managerPort">9066</property> <property name="idleTimeout">300000</property> <property name="bindIp">0.0.0.0</property> <property name="frontWriteQueueSize">4096</property> <property name="processors">32</property> --> <!--分布式事务开关,0为不过滤分布式事务,1为过滤分布式事务(如果分布式事务内只涉及全局表,则不过滤),2为不过滤分布式事务,但是记录分布式事务日志--> <property name="handleDistributedTransactions">0</property> <!--off heap for merge/order/group/limit 1开启0关闭--> <property name="useOffHeapForMerge">1</property> <!--单位为m--> <property name="memoryPageSize">1m</property> <!--单位为k--> <property name="spillsFileBufferSize">1k</property> <property name="useStreamOutput">0</property> <!--单位为m--> <property name="systemReserveMemorySize">384m</property> <!--是否采用zookeeper协调切换 --> <property name="useZKSwitch">true</property> </system> <!-- 全局SQL防火墙设置 --> <!-- <firewall> <whitehost> <host host="127.0.0.1" user="mycat"/> <host host="127.0.0.2" user="mycat"/> </whitehost> <blacklist check="false"> </blacklist> </firewall> --> <user name="root"> <property name="password">123456</property> <property name="schemas">JamesMycatSchema</property> <!-- 表级 DML 权限设置 --> <!-- <privileges check="false"> <schema name="TESTDB" dml="0110" > <table name="tb01" dml="0000"></table> <table name="tb02" dml="1111"></table> </schema> </privileges> --> </user> <user name="user"> <property name="password">user</property> <property name="schemas">JamesMycatSchema</property> <property name="readOnly">true</property> </user> </mycat:server>
rule.xml 主要看一眼这个配置就行,这个是schema文件中mycat employ表指定的分片规则 根据sharding_id进行分片 algorithm是分片函数 指定的是rule文件的function标签
<tableRule name="sharding-by-intfile"> <rule> <columns>sharding_id</columns> <algorithm>hash-int</algorithm> </rule> </tableRule>
<function name=""hash-int" class="io.mycat.route.function.PartitionByFileMap">
<properties name="mapFile">partition-hash-int.txt</properties>
</function>
partition-hash-int.txt
10000=0
最后启动测试即可。