Mysql+Mycat实现数据库主从同步与读写分离

Mysql+Mycat实现数据库主从同步与读写分离

文章转载自： http://mp.weixin.qq.com/s?__biz=MzI0MDQ4MTM5NQ==&mid=2247485333&idx=1&sn=71a60b1deb210100623b6fe120ab867b&chksm=e91b6289de6ceb9fa70aa0ba50b15420e0b4f6e93aed956882801150d81b98d73ca9234f1268&mpshare=1&scene=23&srcid=03276K9Tg3PtO8CaicvoowxX#rd此文章源于 浅谈MySQL集群高可用架构
对文章中的架构扩展介绍，之前写过一篇关于MHA的文章MySQL集群高可用架构之MHA
Mycat介绍官网: http://mycat.io/ 
电子书: http://mycat.io/document/Mycat_V1.6.0.pdf 
书: http://blog.csdn.net/wind520/article/details/53213691MyCAT采用Java开发，实现MySQL公开的二进制协议，将自己伪装成MySQL Server；应用只需连接MyCAT 执行SQL，MyCAT按照配置的策略，分发SQL至相应的MySQL节点。

什么是MYCAT

一个彻底开源的，面向企业应用开发的大数据库集群
支持事务、ACID、可以替代MySQL的加强版数据库
一个可以视为MySQL集群的企业级数据库，用来替代昂贵的Oracle集群
一个融合内存缓存技术、NoSQL技术、HDFS大数据的新型SQL Server
结合传统数据库和新型分布式数据仓库的新一代企业级数据库产品
一个新颖的数据库中间件产品



Mycat特点介绍
支持SQL92标准
支持MySQL、Oracle、DB2、SQL Server、PostgreSQL等DB的常见SQL语法
遵守Mysql原生协议，跨语言，跨平台，跨数据库的通用中间件代理。
基于心跳的自动故障切换，读写分离，MySQL主从，以及galera cluster集群。
支持Galera for MySQL集群，Percona Cluster或者MariaDB cluster
基于Nio实现，有效管理线程，解决高并发问题。
支持数据的多片自动路由与聚合，sum,count,max等常用的聚合函数,跨库分页。
支持全局序列号，解决分布式下的主键生成问题。
分片规则丰富，插件化开发，易于扩展。
强大的web，命令行监控。
支持前端作为MySQL通用代理，后端JDBC方式支持Oracle、DB2、SQL Server 、 mongodb 、巨杉。
集群基于ZooKeeper管理，在线升级，扩容，智能优化，大数据处理（2.0开发版）。

MySQL主从同步

这个配置这里就不再赘述了，可参考前面的文章Linux系统MySQL数据库主从同步实战过程







安装Mycat服务生产环境最好单独使用服务器进行安装，测试环境安装在主库上需要安装JAVA环境
[root@mysql-m ~]# java -versionjava version "1.8.0_144"Java(TM) SE Runtime Environment (build 1.8.0_144-b01)Java HotSpot(TM) 64-Bit Server VM (build 25.144-b01, mixed mode)



安装Mycat服务

[root@mysql-m local]# wget http://dl.mycat.io/1.6-RELEASE/Mycat-server-1.6-RELEASE-20161028204710-linux.tar.gz
[root@mysql-m local]# tar zxf Mycat-server-1.6-RELEASE-20161028204710-linux.tar.gz

[root@mysql-m local]# cd mycat/

[root@mysql-m mycat]# ll

total 24

drwxr-xr-x 2 root root 4096 Sep 23 19:13 bin

drwxrwxrwx 2 root root 4096 Mar  1  2016 catlet

drwxrwxrwx 4 root root 4096 Sep 23 19:13 conf

drwxr-xr-x 2 root root 4096 Sep 23 19:13 lib

drwxrwxrwx 2 root root 4096 Oct 28  2016 logs

-rwxrwxrwx 1 root root  217 Oct 28  2016 version.txt

[root@mysql-m mycat]# cat >>/etc/profile<<EOF

> export MYCAT_HOME=/usr/local/mycat

> export PATH=$PATH:$MYCAT_HOME/bin

> EOF

[root@mysql-m mycat]# source /etc/profile

配置Mycat服务



#以下四项取消注释，修改如下<!--默认是65535 64K 用于sql解析时最大文本长度 --><property name="maxStringLiteralLength">65535</property><property name="sequnceHandlerType">0</property><property name="backSocketNoDelay">1</property><property name="frontSocketNoDelay">1</property><property name="processorExecutor">1</property>



配置schema.xml文件





主从服务器配置读写的用户user并以相应的权限
启动服务





登录管理管理端口，产看是否有默认的逻辑数据库



查看数据读写的入口



从上面可以看出数写入与读取的入口在哪个库上
测试Mycat读写分离功能
接下来测试通过mycat来进行对主从数据库的读写操作





上面的数据是从逻辑数据库插入与查询的，接下来分别从主从库查看数据是否写入成功





再次查看数据源的入口情况



Mycat性能监控

MYCAT监控

支持对Mycat、Mysql性能监控
支持对Mycat的JVM内存提供监控服务
支持对线程的监控
支持对操作系统的CPU、内存、磁盘、网络的监控

下载WEB管理端软件wget https://github.com/MyCATApache/Mycat-download/blob/master/mycat-web-1.0/Mycat-web-1.0-SNAPSHOT-20160617163048-linux.tar.gz 需要安装zookeeper[root@mysql-m local]# wget http://mirrors.hust.edu.cn/apache/zookeeper/zookeeper-3.4.6/zookeeper-3.4.6.tar.gz[root@mysql-m local]# tar zxf zookeeper-3.4.6.tar.gz[root@mysql-m local]# ln -s zookeeper-3.4.6 zookeeper[root@mysql-m conf]# cp zoo_sample.cfg zoo.cfg[root@mysql-m bin]# ./zkServer.sh startJMX enabled by defaultUsing config: /usr/local/zookeeper/bin/../conf/zoo.cfgStarting zookeeper ... STARTED[root@mysql-m ~]# lsof -i :2181COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAMEjava 3639 root 25u IPv6 19337 0t0 TCP *:eforward (LISTEN)
安装WEB管理端[root@mysql-m bin]# cd /usr/local/[root@mysql-m local]# tar zxf Mycat-web-1.0-SNAPSHOT-20160617163048-linux.tar.gz[root@mysql-m local]# cd mycat-web/mycat-web/WEB-INF/classes/[root@mysql-m classes]# lltotal 28drwxr-xr-x 3 root root 4096 Jun 17  2016 com-rw-r--r-- 1 root root  367 Jun 17  2016 jdbc.properties-rw-r--r-- 1 root root 4068 Jun 17  2016 log4j2.xmldrwxr-xr-x 3 root root 4096 Jun 17  2016 mybatis-rw-r--r-- 1 root root  411 Jun 17  2016 mycat.propertiesdrwxr-xr-x 3 root root 4096 Jun 17  2016 orgdrwxr-xr-x 2 root root 4096 Sep 26 00:21 spring[root@mysql-m classes]# vim mycat.properties##Mon Jan 16 15:37:36 CST 2012show.period=3000000zookeeper=10.0.0.11:2181 [root@mysql-m mycat-web]# /usr/local/mycat-web/start.sh &[1] 3684[root@mysql-m mycat-web]# nohup: ignoring input and appending output to `nohup.out'[root@mysql-m mycat-web]# lsof -i :8082COMMAND  PID USER  FD  TYPE DEVICE SIZE/OFF NODE NAMEjava 3685 root 122u IPv6 20997 0t0 TCP *:us-cli (LISTEN)






Mycat特点介绍支持SQL92标准
支持MySQL、Oracle、DB2、SQL Server、PostgreSQL等DB的常见SQL语法
遵守Mysql原生协议，跨语言，跨平台，跨数据库的通用中间件代理。
基于心跳的自动故障切换，读写分离，MySQL主从，以及galera cluster集群。
支持Galera for MySQL集群，Percona Cluster或者MariaDB cluster
基于Nio实现，有效管理线程，解决高并发问题。
支持数据的多片自动路由与聚合，sum,count,max等常用的聚合函数,跨库分页。
支持全局序列号，解决分布式下的主键生成问题。
分片规则丰富，插件化开发，易于扩展。
强大的web，命令行监控。
支持前端作为MySQL通用代理，后端JDBC方式支持Oracle、DB2、SQL Server 、 mongodb 、巨杉。
集群基于ZooKeeper管理，在线升级，扩容，智能优化，大数据处理（2.0开发版）。

MySQL主从同步安装Mycat服务生产环境最好单独使用服务器进行安装，测试环境安装在主库上需要安装JAVA环境
[root@mysql-m ~]# java -versionjava version "1.8.0_144"Java(TM) SE Runtime Environment (build 1.8.0_144-b01)Java HotSpot(TM) 64-Bit Server VM (build 25.144-b01, mixed mode)安装Mycat服务生产环境最好单独使用服务器进行安装，测试环境安装在主库上需要安装JAVA环境
[root@mysql-m ~]# java -versionjava version "1.8.0_144"Java(TM) SE Runtime Environment (build 1.8.0_144-b01)Java HotSpot(TM) 64-Bit Server VM (build 25.144-b01, mixed mode)配置Mycat服务Mycat性能监控

MYCAT监控

支持对Mycat、Mysql性能监控
支持对Mycat的JVM内存提供监控服务
支持对线程的监控
支持对操作系统的CPU、内存、磁盘、网络的监控

下载WEB管理端软件wget https://github.com/MyCATApache/Mycat-download/blob/master/mycat-web-1.0/Mycat-web-1.0-SNAPSHOT-20160617163048-linux.tar.gz 需要安装zookeeper[root@mysql-m local]# wget http://mirrors.hust.edu.cn/apache/zookeeper/zookeeper-3.4.6/zookeeper-3.4.6.tar.gz[root@mysql-m local]# tar zxf zookeeper-3.4.6.tar.gz[root@mysql-m local]# ln -s zookeeper-3.4.6 zookeeper[root@mysql-m conf]# cp zoo_sample.cfg zoo.cfg[root@mysql-m bin]# ./zkServer.sh startJMX enabled by defaultUsing config: /usr/local/zookeeper/bin/../conf/zoo.cfgStarting zookeeper ... STARTED[root@mysql-m ~]# lsof -i :2181COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAMEjava 3639 root 25u IPv6 19337 0t0 TCP *:eforward (LISTEN)
安装WEB管理端[root@mysql-m bin]# cd /usr/local/[root@mysql-m local]# tar zxf Mycat-web-1.0-SNAPSHOT-20160617163048-linux.tar.gz[root@mysql-m local]# cd mycat-web/mycat-web/WEB-INF/classes/[root@mysql-m classes]# lltotal 28drwxr-xr-x 3 root root 4096 Jun 17  2016 com-rw-r--r-- 1 root root  367 Jun 17  2016 jdbc.properties-rw-r--r-- 1 root root 4068 Jun 17  2016 log4j2.xmldrwxr-xr-x 3 root root 4096 Jun 17  2016 mybatis-rw-r--r-- 1 root root  411 Jun 17  2016 mycat.propertiesdrwxr-xr-x 3 root root 4096 Jun 17  2016 orgdrwxr-xr-x 2 root root 4096 Sep 26 00:21 spring[root@mysql-m classes]# vim mycat.properties##Mon Jan 16 15:37:36 CST 2012show.period=3000000zookeeper=10.0.0.11:2181 [root@mysql-m mycat-web]# /usr/local/mycat-web/start.sh &[1] 3684[root@mysql-m mycat-web]# nohup: ignoring input and appending output to `nohup.out'[root@mysql-m mycat-web]# lsof -i :8082COMMAND  PID USER  FD  TYPE DEVICE SIZE/OFF NODE NAMEjava 3685 root 122u IPv6 20997 0t0 TCP *:us-cli (LISTEN)