学习之前先详细介绍Sharding-JDBC Sharding-JDBC是一个开源的适用于微服务的分布式数据访问基础类库,它始终以云原生的基础开发套件为目标。 Sharding-JDBC定位为轻量级java框架,使用客户端直连数据库,以jar包形式提供服务,未使用中间层,无需额外部署,无其他依赖,DBA也无需改变原有的运维方式,可理解为增强版的JDBC驱动,旧代码迁移成本几乎为零。 Sharding-JDBC完整的实现了分库分表,读写分离和分布式主键功能,并初步实现了柔性事务。从2016年开源至今,在经历了整体架构的数次精炼以及稳定性打磨后,如今它已积累了足够的底蕴,相信可以成为开发者选择技术组件时的一个参考。 1. 分库分表 SQL解析功能完善,支持聚合,分组,排序,LIMIT,TOP等查询,并且支持级联表以及笛卡尔积的表查询 支持内、外连接查询 分片策略灵活,可支持=,BETWEEN,IN等多维度分片,也可支持多分片键共用,以及自定义分片策略 基于Hint的强制分库分表路由 2. 读写分离 一主多从的读写分离配置,可配合分库分表使用 基于Hint的强制主库路由 3. 柔性事务 最大努力送达型事务 TCC型事务(TBD) 4. 分布式主键 统一的分布式基于时间序列的ID生成器 5. 兼容性 可适用于任何基于java的ORM框架,如:JPA, Hibernate, Mybatis, Spring JDBC Template或直接使用JDBC 可基于任何第三方的数据库连接池,如:DBCP, C3P0, BoneCP, Druid等 理论上可支持任意实现JDBC规范的数据库。目前支持MySQL,Oracle,SQLServer和PostgreSQL 6. 灵活多样的配置 Java YAML Inline表达式 Spring命名空间 Spring boot starter 7. 分布式治理能力 (2.0新功能) 配置集中化与动态化,可支持数据源、表与分片策略的动态切换(2.0.0.M1) 客户端的数据库治理,数据源失效自动切换(2.0.0.M2) 基于Open Tracing协议的APM信息输出(2.0.0.M3) 架构图 一、概述 之前,我们介绍了利用Mycat进行分库分表操作,Mycat分表操作是利用分库来进行的,单个库中的分表操作可结合MySQL的分区进行,这也是Mycat官方提倡的方式。那么,如何利用Mycat真正实现数据库的分库分表,可以私信我。今天,我们来看看sharding-jdbc,sharding-jdbc也是一款分库分表的“中间件”,不过,它并不向Mycat那样作为一个真正的中间件,它是一款以jar包的形式整合到业务中的插件,这就决定了它是轻量级的,用法也是十分简单的。 二、分库分表实战 接下来,我们就利用sharding-jdbc进行数据库的分库分表操作。 1、创建数据库 首先我们创建相应的数据库 这样我们就创建了两个数据库sharding_0和sharding_1; 接下来我们在两个库中创建相应的数据表,在两个库中分别进行如下SQL: 这样,我们的数据库就准备好了。 2、创建项目 接下来,我们就创建一个Maven项目,项目结构如下: 3、配置pom.xml 4、创建数据库映射类 这里,我们创建两个数据库映射类:User类和Student类。 4-1、User类 4-2、Student类 5、创建Mapper类 5-1、UserMapper类 5-2、StudentMapper类 6、创建service类 6-1、UserService类 6-2、StudentService类 7、创建service的实现类 7-1、UserServiceImpl类 7-2、StudentServiceImpl类 8、创建分库逻辑 8-1、User分库逻辑UserSingleKeyDatabaseShardingAlgorithm类 8-2、Student分库逻辑StudentSingleKeyDatabaseShardingAlgorithm 9、创建分表逻辑 9-1、User分表逻辑UserSingleKeyTableShardingAlgorithm 9-2、创建Student分表逻辑StudentSingleKeyTableShardingAlgorithm 10、创建Mapper.xml 10-1、创建UserMapper.xml 10-2、创建StudentMapper.xml 11、创建jdbc_dev.properties 12、创建spring配置文件 12-1、spring-database.xml 12-2、spring-sharding.xml 13、创建log4j.xml 14、创建测试类ShardingJdbcMybatisTest 三、测试 我们进行ShardingJdbcMybatisTest类,查看数据表数据,即可看到我们的程序利用sharding-jdbc实现了分库分表操作。 |
|