分库分表(7)--- SpringBoot+ShardingSphere实现分库分表 + 读写分离
2019-10-17 23:26
2251 查看
分库分表(7)--- ShardingSphere实现分库分表+读写分离
有关分库分表前面写了六篇博客:
2、分库分表(2) --- ShardingSphere(理论)
3、分库分表(3) ---SpringBoot + ShardingSphere实现读写分离
4、分库分表(4) ---SpringBoot + ShardingSphere 实现分表
5、分库分表(5) ---SpringBoot + ShardingSphere 实现分库分表
6、分库分表(6)--- SpringBoot+ShardingSphere实现分表+ 读写分离
这篇博客通过ShardingSphere
实现分库分表 + 读写分离,并在文章最下方附上项目
Github地址。
一、项目概述
1、技术架构
项目总体技术选型
SpringBoot2.0.6 + shardingsphere4.0.0-RC1 + Maven3.5.4 + MySQL + lombok(插件)
2、项目说明
场景在实际开发中,如果数据库压力大我们可以通过 分库分表 的基础上进行 读写分离,来减缓数据库压力。
3、数据库设计
分库ms单库分库分为 ms0库 和 ms1库。
分表tab_user单表分为tab_user0表 和 tab_user1表。
读写分离数据写入ms0库 和 ms1库,数据读取 sl0库 和 sl1库。
如图
ms0 ---主库
ms1 ---主库
sl0 ---从库
sl1 ---从库
说明初始数据的时候,这边只有 sl0从库 我插入了一条数据。那是因为我们这个项目中Mysql服务器并没有实现主从部署,这四个库都在同一服务器上,所以
做不到主数据库数据自动同步到从数据库。所以这里在从数据库建一条数据。等下验证的时候,我们只需验证数据是否存入
ms0和
ms1,数据读取是否在
sl0和
sl1。
具体的创建表SQL也会放到GitHub项目里
二、核心代码
说明完整的代码会放到GitHub上,这里只放一些核心代码。
1、application.properties
server.port=8082 #指定mybatis信息 mybatis.config-location=classpath:mybatis-config.xml #打印sql spring.shardingsphere.props.sql.show=true #数据源 spring.shardingsphere.datasource.names=master0,slave0,master1,slave1 spring.shardingsphere.datasource.master0.type=com.alibaba.druid.pool.DruidDataSource spring.shardingsphere.datasource.master0.driver-class-name=com.mysql.jdbc.Driver spring.shardingsphere.datasource.master0.url=jdbc:mysql://localhost:3306/ms0?characterEncoding=utf-8 spring.shardingsphere.datasource.master0.username=root spring.shardingsphere.datasource.master0.password=root spring.shardingsphere.datasource.slave0.type=com.alibaba.druid.pool.DruidDataSource spring.shardingsphere.datasource.slave0.driver-class-name=com.mysql.jdbc.Driver spring.shardingsphere.datasource.slave0.url=jdbc:mysql://localhost:3306/sl0?characterEncoding=utf-8 spring.shardingsphere.datasource.slave0.username=root spring.shardingsphere.datasource.slave0.password=root spring.shardingsphere.datasource.master1.type=com.alibaba.druid.pool.DruidDataSource spring.shardingsphere.datasource.master1.driver-class-name=com.mysql.jdbc.Driver spring.shardingsphere.datasource.master1.url=jdbc:mysql://localhost:3306/ms1?characterEncoding=utf-8 spring.shardingsphere.datasource.master1.username=root spring.shardingsphere.datasource.master1.password=root spring.shardingsphere.datasource.slave1.type=com.alibaba.druid.pool.DruidDataSource spring.shardingsphere.datasource.slave1.driver-class-name=com.mysql.jdbc.Driver spring.shardingsphere.datasource.slave1.url=jdbc:mysql://localhost:3306/slave1?characterEncoding=utf-8 spring.shardingsphere.datasource.slave1.username=root spring.shardingsphere.datasource.slave1.password=root #根据年龄分库 spring.shardingsphere.sharding.default-database-strategy.inline.sharding-column=age spring.shardingsphere.sharding.default-database-strategy.inline.algorithm-expression=master$->{age % 2} #根据id分表 spring.shardingsphere.sharding.tables.tab_user.actual-data-nodes=master$->{0..1}.tab_user$->{0..1} spring.shardingsphere.sharding.tables.tab_user.table-strategy.inline.sharding-column=id spring.shardingsphere.sharding.tables.tab_user.table-strategy.inline.algorithm-expression=tab_user$->{id % 2} #指定master0为主库,slave0为它的从库 spring.shardingsphere.sharding.master-slave-rules.master0.master-data-source-name=master0 spring.shardingsphere.sharding.master-slave-rules.master0.slave-data-source-names=slave0 #指定master1为主库,slave1为它的从库 spring.shardingsphere.sharding.master-slave-rules.master1.master-data-source-name=master1 spring.shardingsphere.sharding.master-slave-rules.master1.slave-data-source-names=slave1
Sharding-JDBC可以通过
Java,
YAML,
Spring命名空间和
Spring Boot Starter四种方式配置,开发者可根据场景选择适合的配置方式。具体可以看官网。
2、UserController
@RestController public class UserController { @Autowired private UserService userService; /** * 模拟插入数据 */ List<User> userList = Lists.newArrayList(); /** * 初始化插入数据 */ @PostConstruct private void getData() { userList.add(new User(1L,"小小", "女", 3)); userList.add(new User(2L,"爸爸", "男", 30)); userList.add(new User(3L,"妈妈", "女", 28)); userList.add(new User(4L,"爷爷", "男", 64)); userList.add(new User(5L,"奶奶", "女", 62)); } /** * @Description: 批量保存用户 */ @PostMapping("save-user") public Object saveUser() { return userService.insertForeach(userList); } /** * @Description: 获取用户列表 */ @GetMapping("list-user") public Object listUser() { return userService.list(); }
三、测试验证
1、批量插入数据
请求接口
localhost:8082/save-user
我们可以从商品接口代码中可以看出,它会批量插入5条数据。我们先看控制台输出SQL语句
我们可以从SQL语句可以看出 master0 和 master1 库中都插入了数据。
我们再来看数据库
ms0.tab_user0
ms0.tab_user1
ms1.tab_user0
ms1.tab_user1
完成分库分表插入数据。
2、获取数据
这里获取列表接口的SQL。
select * from tab_user
请求接口结果
结论从接口返回的结果可以很明显的看出,数据存储在主库,而数据库的读取在从库。
注意ShardingSphere并不支持
CASE WHEN、
HAVING、
UNION (ALL),
有限支持子查询。这个官网有详细说明。
Github地址:https://github.com/yudiandemingzi/spring-boot-sharding-sphere
参考
我相信,无论今后的道路多么坎坷,只要抓住今天,迟早会在奋斗中尝到人生的甘甜。抓住人生中的一分一秒,胜过虚度中的一月一年!(20)
相关文章推荐
- 分库分表(6)--- SpringBoot+ShardingSphere实现分表+ 读写分离
- SpringBoot 2.0 整合sharding-jdbc中间件,实现数据分库分表
- SpringBoot 2.0 整合sharding-jdbc中间件实现数据分库分表
- 分库分表(4) ---SpringBoot + ShardingSphere 实现分表
- 分库分表(5) ---SpringBoot + ShardingSphere 实现分库分表
- Springboot2.x + ShardingSphere 实现分库分表
- springboot+mybatis-plus+多数据源配置,实现分表分库的数据访问
- Spring Boot + Sharding-JDBC实现读写分离和数据脱敏
- Spring Boot2.0.3 Mybatis Sharding-jdbc3.X集成实现数据库的读写分离(一)MySql的主从配置
- spring-ddal实现读写分离、分库分表
- 分库分表中间件-sharding-jdbc学习笔记-基于SpringBoot+TKMybatis搭建
- Spring Boot2.0.3 Mybatis Sharding-jdbc3.X集成实现数据库的读写分离(二)-项目实现
- Mysql8.0主从复制搭建,shardingsphere+springboot+mybatis读写分离
- spring boot sharding-jdbc实现分佈式读写分离和分库分表的实现
- spring4.0.2+mybatis3.2.4+sharding-jdbc1.4.2实现分库分表、读写分离及事物支持
- Spring Boot2(四):使用Spring Boot多数据源实现读写分离
- springboot结合atomikos+mybaits实现分布式事务及读写分离【最简配置】
- Spring MVC +Spring + Mybatis 构建分库分表总结 SSM搭建以及分库分表的实现
- mycat+mysql集群:实现读写分离,分库分表
- Mycat实现MySQL的分库分表、读写分离、主从切换