数据库分库分表

数据库分库分表

1.垂直拆分(拆分的是字段)

  • 1.每个库(表)的结构都不一样
  • 2.每个库(表)的数据(至少有一列一样)
  • 3.每个库(表)的并集是全量数据

1.1垂直分库:

  • 电商(shop)数据库可分为(orders订单库),(users)会员库,(goods商品库)。

1.2垂直分表:

  • 原表:user表(userid,name,password,sex,adress,age,niack name)
  • 分为如下两表:
  • 分表1.user_base表(userid,name,password)
  • 分表2.user_info表(userid,sex,adress,age,niack name)

1.3优点

  • 1.拆分后业务清晰(专库专用按业务拆分)
  • 2.数据维护简单,按业务不同业务放到不同机器上

1.4缺点

  • 1.如果单表的数据库压力大,读写压力大
  • 2.受某种业务决定,或者被限制,也就是说一个业务往往会影响到数据库的瓶颈(性能问题)
  • 3.部分业务无法关联join,只能通过程序接口去调用,提高了开发复杂度,

2.水平拆分(拆分的是内容)

  • 1.每个库(表)的结构都一样
  • 2.每个库(表)的数据都不一样
  • 3.每个库(表)的并集是全量数据

2.1 一种方法:id取模2,,如果userid mod 2等于1,去一表,等于0去二表

2.2优点

  • 1.单库(表)的数据保持在一定量(减少),有助于性能提高
  • 2.提高了系统的稳定性和负载能力
  • 3.切分表的结构相同

2.3缺点

  • 1.数据的扩容很有难度,维护量大
  • 2.拆分规则很难抽象出来
  • 3.分片事务的一致性问题,部分业务无法关联join,只能通过java程序接口去调用

3.分库分表问题

  • 1.ACID分布式事务(分布式事务指事务的操作位于不同的节点上,需要保证事务的 AICD 特性。例如在下单场景下,库存和订单如果不在同一个节点上,就涉及分布式事务。)
  • 2.维护成本高
  • 3.跨库查询问题
  • 4.分布式全局唯一id

4.分库分表中间件

4.1proxy代理层

  • mycat,atlas,mysql-proxy,shardingproxy

4.2jdbc应用层

shardingsphere(生态圈),TDDL,shardingjdbc

上一篇:两个操作者之间的通信二


下一篇:从JDBC到Mybatis