数据库分库分表中间件选择

news2024/11/18 9:21:08

目前分库分表的中间件有三种设计思路，分别是：

  • 采用分散式架构，适用于用Java开发的高性能轻量级OLTP应用程序，以Sharding-JDBC为代表。
  • 采用中间层Proxy架构，提供了静态输入和所有语言支持，适用于OLAP应用程序和分片数据库的管理和操作情况，以Sharding-Proxy、Mycat 为代表。
  • Database Mesh架构，适合k8s环境，以Sharding-Sidecar为代表。

分散式架构

以Sharding-JDBC为例，Sharding-JDBC它定位为轻量级 Java框架，在 Java的 JDBC层提供的额外服务。它使用客户端直连数据库，以 jar 包形式提供服务，无需额外部署和依赖，可理解为增强版的 JDBC 驱动，完全兼容JDBC和各种 ORM 框架。
在这里插入图片描述

优点：
1、轻量，范围更加容易界定，只是 JDBC 增强，不包括 HA、事务以及数据库元数据管理
2、开发的工作量较小，无需关注 nio，各个数据库协议等
3、运维无需改动，无需关注中间件本身的 HA
4、性能高，JDBC 直连数据库，无需二次转发
5、可支持各种基于 JDBC 协议的数据库，如：MySQL，Oralce，SQLServer

中间层Proxy架构

以Sharding-Proxy为例，中间层将自身定义为透明的数据库代理，它提供了一种数据库服务器，该服务器封装了数据库二进制协议以支持异构语言。对DBA友好的是，现在提供的MySQL版本可以使用与MySQL协议兼容的任何类型的终端（例如MySQL Command Client，MySQL Workbench等）。
在这里插入图片描述

优点：
1、 对应用程序完全透明，可以直接用作MySQL
2、适用于与MySQL和PostgreSQL协议兼容的任何类型的终端
2、更有效的管理数据库的连接
3、整合大数据思路，将 OLTP 和 OLAP 分离处理
4、夸语言支持比较好

Database Mesh架构

以Sharding-Sidecar为代表。Sharding-Sidecar（TODO）将自己定义为Kubernetes环境的云原生数据库代理，以sidecar的形式负责对数据库的所有访问。它提供了一个与数据库交互的网格层，我们称之为Database Mesh。

Database Mesh强调如何将分布式数据库访问应用程序与数据库连接。着重于交互，它有效地组织了杂乱的应用程序与数据库之间的交互。使用数据库网格访问数据库的应用程序和数据库将形成一个大型网格系统，只需将它们放在相应的正确位置即可。它们都由网格层控制。
在这里插入图片描述

混合架构

Sharding-JDBC采用分散式架构，适用于用Java开发的高性能轻量级OLTP应用程序；Sharding-Proxy提供了静态输入和所有语言支持，适用于OLAP应用程序和分片数据库的管理和操作情况。

在这里插入图片描述

开源框架对比

–MycatSharding-JDBCSharding-ProxySharding-Sidecar
官方网站官方网站官方网站官方网站官方网站
源码地址gitcodegitcodegitcodegitcode
官方文档Mycat 权威指南官方文档官方文档官方文档
开发语言JavaJavaJavaJava
数据库MySQL
Oracle
SQL Server
PostgreSQL
DB2
MongoDB
SequoiaDB		MySQL
Oracle
SQLServer
PostgreSQL
任何遵循 SQL92 标准的数据库		MySQL/PostgreSQLMySQL/PostgreSQL
连接数低高低高
应用语言任意Java任意任意
代码入侵无需要修改代码无无
性能损耗略高损耗低损耗略高损耗低
中心化是否是否
静态入口有无有无
管理控制台Mycat-webSharding-UISharding-UISharding-UI
分库分表单库多表/多库单表✔️✔️✔️
多租户方案✔️———
读写分离✔️✔️✔️✔️
分片策略定制化✔️✔️✔️✔️
分布式主键✔️✔️✔️✔️
标准化事务接口✔️✔️✔️✔️
XA强一致事务✔️✔️✔️✔️
柔性事务—✔️✔️✔️
配置动态化开发中✔️✔️✔️
编排治理开发中✔️✔️✔️
数据脱敏—✔️✔️✔️
可视化链路追踪—✔️✔️✔️
多节点操作分页
去重
排序
分组
聚合
分页
去重
排序
分组
聚合
分页
去重
排序
分组
聚合
分页
去重
排序
分组
聚合
跨库关联跨库 2 表 Join
ER Join
基于 caltlet 的多表 Join		———
IP 白名单✔️———
SQL 黑名单✔️———
存储过程✔️———

结论

综合目前已有资源、业务情况、前期改造投入成本和后期运营成本考虑，我建议选择ShardingSphere，前期只采用分散架构只使用Sharding-JDBC，后期如果有需要可以部署Sharding-Proxy根据业务情况使用混合架构。

参考

https://blog.csdn.net/weixin_43549578/article/details/106709343
https://shardingsphere.apache.org/document/current/cn/overview/
https://blog.csdn.net/vc33569/article/details/133178385

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1479123.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

云计算 2月26号 （进程管理和常用命令）

云计算 2月26号 （进程管理和常用命令）

一、权限扩展 文件权限管理之： 隐藏权限防止root误删除 文件属性添加与查看 [rootlinux-server ~]# touch file1 file2 file3 1.查看文件属性 [rootlinux-server ~]# lsattr file1 file2 file3 ---------------- file1 ---------------- file2 ---------------- f…
阅读更多...
day57 集合 List Set Map

day57 集合 List Set Map

List实现类 List接口特点：元素有序 可重复 Arraylist 可变数组 jdk 8 以前Arraylist容量初始值10 jdk8 之后初始值为0，添加数据时，容量为10； ArrayList与Vector的区别？ LinkList：双向链表 优点&#xff1…
阅读更多...
linux系统---LNMP架构下部署Discuz社区论坛与Wordpress博客

linux系统---LNMP架构下部署Discuz社区论坛与Wordpress博客

目录 一、编译安装Nginx 1、关闭防火墙 2、安装依赖包 3、创建运行用户 4、压缩软件包并编译安装 5、软链接路径优化 ​编辑 6、添加Nginx系统服务 二.编译安装MySQL服务 1.安装依赖环境 ​编辑 2、创建运行用户 3、编译安装 ​编辑 4、修改mysql 配置文件 5、…
阅读更多...
Opencv基本操作 (上)

Opencv基本操作 (上)

目录 图像基本操作 阈值与平滑处理 图像阈值 图像平滑处理 图像形态学操作 图像梯度计算 Sobel 算子 Canny 边缘检测 图像金字塔与轮廓检测 图像轮廓 接口定义 轮廓绘制 轮廓特征与相似 模板匹配 傅里叶变换 傅里叶变换的作用 滤波 图像基本操作 读取图像&…
阅读更多...
electron 项目环境变量使用注意 public

electron 项目环境变量使用注意 public

问题 最近项目中，electron需要调用唤醒本地的另一个客户端程序，但是这个客户端程序报错了。sqlite3 报out of memory. apiSHGetFolderPathW 获取CSIDL_COMMON_DOCUMENTS报 1008，试图引用不存在的令牌。 排查 一看到这个，首先想…
阅读更多...
javaWeb学习04

javaWeb学习04

AOP核心概念: 连接点: JoinPoint, 可以被AOP控制的方法 通知: Advice 指哪些重复的逻辑，也就是共性功能(最终体现为一个方法) 切入点: PointCut, 匹配连接点的条件，通知仅会在切入点方法执行时被应用 目标对象: Target, 通知所应用的对象 通知类…
阅读更多...
Django Web架构：全面掌握Django模型字段（上）

Django Web架构：全面掌握Django模型字段（上）

Django Web架构 全面掌握Django模型字段（上） - 文章信息 - Author: 李俊才 (jcLee95) Visit me at CSDN: https://jclee95.blog.csdn.netMy WebSite：http://thispage.tech/Email: 291148484163.com. Shenzhen ChinaAddress of this article…
阅读更多...
数电学习笔记——逻辑函数及其描述方法

数电学习笔记——逻辑函数及其描述方法

目录 一、逻辑函数 二、逻辑函数的描述方法 1、逻辑真值表 2、逻辑函数式 3、逻辑图 4、波形图 三、逻辑函数的两种标准形式 1、最小项与最大项 最小项 最小项的性质 最大项 最大项的性质 2、最大项与最小项的关系 3、逻辑函数的最小项之和形式 4、逻辑函数的最…
阅读更多...
Unity（第二十四部）UI

Unity（第二十四部）UI

在游戏开发中，用户界面（UI）是至关重要的一部分。它负责与玩家进行交互，提供信息，并增强游戏的整体体验。Unity 提供了强大的工具和功能来创建和管理 UI。 ui的底层就是画布，创建画布的时候会同时创建一个事…
阅读更多...
k8s部署mysql

k8s部署mysql

（作者：陈玓玏） 一、前置条件 已部署k8s，服务端版本为1.21.14 二、部署mysql 拉取镜像； docker pull mysql将账号密码等信息写到configmap，创建configmap； apiVersion: v1 kind: ConfigMap m…
阅读更多...
C++笔记（五）--- 虚函数（virtual）

C++笔记（五）--- 虚函数（virtual）

目录 虚函数介绍 虚函数、覆盖和重载区别 虚函数介绍 C的虚函数是多态性的表现 1.构造函数不能为虚函数2.子类继承时虚函数仍为虚函数3.虚函数类外实现时，不需要加virtual4.有虚函数的类，析构函数一定要写成虚函数（否则可能会造成内存泄漏&…
阅读更多...
Docker实战——容器

Docker实战——容器

目录 Docker 容器的基本概念与操作1.使用“docker create”创建容器。这里基于Nginx的镜像创建了一个容器，名字为mycontainer。2.使用“docker ps -a”命令查看所有的容器，这时的容器不一定是运行状态。3.使用 “docker start” 命令可以启动容器。4.使用…
阅读更多...
SpringBoot整合rabbitmq-主题交换机队列（四）

SpringBoot整合rabbitmq-主题交换机队列（四）

说明：Topic主题交换机它的大致流程是交换机和一个或者多个队列绑定，这个绑定的Routingkey是包含通配符的，满足通配符的队列会接收到消息。 通配符规则： #：匹配一个或多个词 *：匹配一个词 例如&#xff…
阅读更多...
android TextView 实现富文本显示

android TextView 实现富文本显示

android TextView 实现富文本显示，实现抖音直播间公屏消息案例 使用： val tvContent: TextView helper.getView(R.id.tvContent)//自己根据UI业务要求，可以控制 图标显示 大小val levelLabel MyImgLabel( bitmap 自己业务上的bitmap )va…
阅读更多...
Prometheus 安装指南

Prometheus 安装指南

目录 介绍 安装 介绍 Prometheus是一款开源监控系统，适用于容器化和微服务。它使用多维数据模型，支持PromQL查询语言，可以通过多种方式采集数据。具备灵活的告警和通知机制，可集成图形工具创建仪表盘。通过本地存储高效保存时间…
阅读更多...
ywtool check命令及ywtool clean命令

ywtool check命令及ywtool clean命令

一.ywtool check命令 1.1 ywtool check -I 1.2 ywtool check all 1.3 ywtool check io 1.4 ywtool check elk 1.5 ywtool check php 1.6 ywtool check mysql 1.7 ywtool check nginx 1.8 ywtool check system 1.9 ywtool check docker_nbip [容器名称] 1.10 ywtool check 1.10…
阅读更多...
buuctf_crypto_丢失的MD5+Quoted-printable+RSA

buuctf_crypto_丢失的MD5+Quoted-printable+RSA

丢失的MD5 题目：（就一python文件，MD5.py） for i in range(32,127):for j in range(32,127):for k in range(32,127):mhashlib.md5()m.update(TASCchr(i)O3RJMVchr(j)WDJKXchr(k)ZM)desm.hexdigest()if e9032 in des and da in d…
阅读更多...
吴恩达《机器学习》学习笔记

吴恩达《机器学习》学习笔记

本笔记资料来源于 http://www.ai-start.com/ml2014/，该笔记来自于https://blog.csdn.net/dadapongi6/article/details/105668394，看了忘，忘了看，再看一遍。 时间统计：2024.2.29 5个番茄钟，从week1开始&…
阅读更多...
游戏陪玩精品系统源码优化版3.0

游戏陪玩精品系统源码优化版3.0

下载地址：游戏陪玩精品系统源码优化版.zip 截图：
阅读更多...
[Vulnhub]靶场 Web Machine（N7）

[Vulnhub]靶场 Web Machine（N7）

kali:192.168.56.104 主机探测: arp-scan -l 靶机ip:192.168.56.104 端口扫描 nmap -p- 192.168.56.106 看一下web 目录扫描 gobuster dir -u http://192.168.56.106 -x html,txt,php,bak,zip --wordlist/usr/share/wordlists/dirbuster/directory-list-2.3-medium.txt exp…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023