当当开源sharding-jdbc，轻量级数据库分库分表中间件

亦凉 2022-06-07 10:56 168阅读 0赞

近期，当当开源了数据库分库分表中间件[sharding-jdbc][]。

Sharding-JDBC是当当应用框架ddframe中，从关系型数据库模块dd-rdb中分离出来的数据库水平分片框架，实现透明化数据库分库分表访问。Sharding-JDBC是继dubbox和elastic-job之后，ddframe系列开源的第3个项目。   
Sharding-JDBC直接封装JDBC协议，可以理解为增强版的JDBC驱动，旧代码迁移成本几乎为零。   
Sharding-JDBC定位为轻量级java框架，使用客户端直连数据库，以jar包形式提供服务，无proxy代理层，无需额外部署，无其他依赖，DBA也无需改变原有的运维方式。

主要包括以下特点：

1.  可适用于任何基于java的ORM框架，如：JPA, Hibernate, Mybatis, Spring JDBC Template或直接使用JDBC。
2.  可基于任何第三方的数据库连接池，如：DBCP, C3P0, BoneCP, Druid等。
3.  理论上可支持任意实现JDBC规范的数据库。虽然目前仅支持MySQL，但已有支持Oracle，SQLServer等数据库的计划。
4.  分片策略灵活，可支持等号，between，in等多维度分片，也可支持多分片键。
5.  SQL解析功能完善，支持聚合，分组，排序，limit，or等查询，并支持Binding Table以及笛卡尔积表查询。
6.  性能高。单库查询QPS为原生JDBC的99.8%；双库查询QPS比单库增加94%。

架构图

与常见开源产品对比   
这里仅列出目前停止更新，但仍然在数据库分片领域非常有影响力的几个项目。

<table style="margin:0px; padding:0px; border:1px solid silver; border-collapse:collapse; word-break:break-word; color:rgb(0,0,0); font-family:Verdana,Arial,Helvetica,sans-serif; font-size:13px; background-color:rgb(254,254,242); width:514px"> 
 <tbody style="margin:0px; padding:0px"> 
  <tr style="margin:0px; padding:0px"> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 功能</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> Cobar</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> Cobar-client</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> TDDL</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> Sharding-JDBC</td> 
  </tr> 
  <tr style="margin:0px; padding:0px"> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 分库</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 有</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 有</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 未开源</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 有</td> 
  </tr> 
  <tr style="margin:0px; padding:0px"> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 分表</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 无</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 无</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 未开源</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 有</td> 
  </tr> 
  <tr style="margin:0px; padding:0px"> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 中间层</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 是</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 否</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 否</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 否</td> 
  </tr> 
  <tr style="margin:0px; padding:0px"> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> ORM支持</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 任意</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 仅MyBatis</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 任意</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 任意</td> 
  </tr> 
  <tr style="margin:0px; padding:0px"> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 数据库支持</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 仅MySQL</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 任意</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 任意</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 任意</td> 
  </tr> 
  <tr style="margin:0px; padding:0px"> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 异构语言</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 可</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 仅Java</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 仅Java</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 仅Java</td> 
  </tr> 
  <tr style="margin:0px; padding:0px"> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 外部依赖</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 无</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 无</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> Diamond</td> 
   <td style="margin:0px; padding:3px; border:1px solid silver; border-collapse:collapse"> 无</td> 
  </tr> 
 </tbody> 
</table>

Sharding-JDBC严格遵循Apache 2.0许可证的要求。测试覆盖率95%，目前已部署至maven中央仓库。可使用以下坐标引用：

<groupId>com.dangdang</groupId>
    <artifactId>sharding-jdbc-core</artifactId>
    <version>1.0.0</version>

Sharding-JDBC将保持持续更新，后续会完善读写分离、柔性分布式事务和高可用等相关功能。

--------------------

感谢[郭蕾][Link 1]对本文的审校。

http://www.infoq.com/cn/news/2016/01/sharding-jdbc-dangdang

[sharding-jdbc]: https://github.com/dangdangdotcom/sharding-jdbc
[Link 1]: http://www.infoq.com/cn/author/%E9%83%AD%E8%95%BE