【Mysql】分库分表
文章目录
- 【Mysql】分库分表
- 1. 介绍
- 2. 拆分策略
- 2.1 垂直拆分
- 2.1.1 垂直分库
- 2.1.2 垂直分表
- 2.2 水平拆分
- 2.2.1 水平分库
- 2.2.2 水平分表
- 3. MyCat
- 3.1 概述
1. 介绍
采用单数据库进行数据存储存在以下瓶颈:
- IO瓶颈:热点数据太多,数据库缓存不足,产生大量磁盘IO,效率较低。请求数据太多,带宽不够,网络IO瓶颈。
- CPU瓶颈:排序、分组、连接查询、聚合统计等sql会耗费大量的CPU资源,请求数太多,CPU出现瓶颈。
为解决以上问题,我们需要对数据库进行分库分表处理。
分库分表的中心思想就是将数据分散存储,使得单一数据库/表的数据量变小来缓解单一数据库的性能问题,从而达到提升数据库性能的目的。
2. 拆分策略
分库分表主要分为两种形式:
- 垂直拆分
- 水平拆分
根据拆分的粒度又分为:
- 分库
- 分表
所以组成的拆分策略最终如下:
2.1 垂直拆分
2.1.1 垂直分库
垂直分库:以表为依据,根据业务将不同表拆分到不同库中。(微服务一般就是采用垂直分库,根据业务划分数据库)
特点:
- 每个库的表结构都不同
- 每个库的数据也都不同
- 所有库的并集是全量数据。
2.1.2 垂直分表
垂直分表:以字段为依据,根据字段属性将不同字段拆分到不同表中。(如用户的账号信息单独存一张表,个人信息存另一张表)
特点:
- 每个表的结构都不同
- 每个表数据也都不同
- 所有表的并集是全量数据。
2.2 水平拆分
2.2.1 水平分库
水平分库:以字段为依据,按照一定策略,将一个库的数据拆分到多个库中。
特点:
- 每个库的表结构都一样。
- 每个表的数据不一样。
- 所有库的并集是全量数据。
2.2.2 水平分表
水平分表:以字段为依据,按照一定策略,将一个表的数据拆分到多个表中。
特点:
- 每个表的表结构都一样。
- 每个表的数据都不一样。
- 所有表的并集是全量数据。
注:在业务系统中,为了缓解磁盘IO及CPU的性能瓶颈,到底是垂直拆分,还是水平拆分;具体是分库,还是分表,都需要根据具体的业务需求具体分析。
3. MyCat
3.1 概述
Mycat是开源的、活跃的、基于Java语言编写的MySQL数据库中间件。可以像使用mysql一样来使用 mycat,对于开发人员来说根本感觉不到mycat的存在。
开发人员只需要连接MyCat即可,而具体底层用到几台数据库,每一台数据库服务器里面存储了什么数 据,都无需关心。 具体的分库分表的策略,只需要在MyCat中配置即可。
在MyCat的整体结构中,分为两个部分:
- 上面的逻辑结构
- 下面的物理结构
在MyCat的逻辑结构主要负责逻辑库、逻辑表、分片规则、分片节点等逻辑结构的处理,而具体的数据存储还是在物理结构,也就是数据库服务器中存储的。