OceanBase集群扩缩容

news2024/11/16 18:01:22

​ OceanBase 数据库采用 Shared-Nothing 架构，各个节点之间完全对等，每个节点都有自己的 SQL 引擎、存储引擎、事务引擎，天然支持多租户，租户间资源、数据隔离，集群运行的最小资源单元是Unit，每个租户在每个节点上只会运行一个Unit。

先看看集群整体架构图，下面集群的部署模式为“三中心三副本”

有3个zone，每个zone下有两个OBServer节点
在这里插入图片描述
以业务租户Tenant_1为例，它有2个Unit，因为蓝色主副本P1、P2运行在zone1的observer上，蓝色主副本P3、P4运行在zone2的observer上，它们分别在另外两个observer上都运行着一个绿色从副本，以提高可用性和读性能，这是“三中心三副本”的由来。

在只有3个zone的情况下，Tenant_1租户的Unit=2，设置Unit=3 就是扩容，Unit=1 就是缩容

  • 扩容：需要在每个zone下都增加一台服务器，总共3台，然后在数据库参数中调整Unit_Num的大小由2改为3，就会自动在新添加的服务器上启动Unit（默认配置了负载均衡策略），并自动迁移数据，来提升服务能力

  • 缩容有两种场景，1.只减少租户下Unit数量，不下线服务器，2.减少Unit数量，也下线服务器

​ 在有多个zone的情况下，可以在创建租户时，指定租户属于不同zone，还可以迁移zone从一个机房搬迁到另一个机房，先增加 Zone，再在该 Zone 内增加节点，然后调整租户的 Locatity 属性，租户就是数据库实例，相当于把不同的数据库实例部署在不同的zone上。

​ 通过上面的理论得知，扩缩容实际上是调整Unit_Num的数量，而每个节点上只能运行一个租户的一个Unit，它又需要2个副本，所以增加一个Unit就需要在所有zone上都增加一台服务器，且Unit的资源描述大小不能超过服务器硬件配置（Unit需要8核、16G，而增加的服务器只有4核8G，则扩容失败），如果已有zone内的服务器资源配置充足，则不需要添加服务器就可以扩容。

​ **Tenant_SYS ** 系统租户目前不能扩容，只能3副本的形式存在，而且系统租户资源需要管理整个OceanBase集群的正常运行，所以不要在系统租户上创建数据库和表（上篇文章因演示需要才直接在系统租户下创建的数据库表），官方推荐在自定义租户下创建库表。

数据链路：客户端应用 -> F5/LVS -> OBProxy -> OBServer

上面介绍了扩缩容的理论，下面介绍扩缩容的实际操作，还是先说理论：
  • 在部署集群后，会自动创建一个系统租户（Tenant_SYS），同时会创建一些元数据表，部署时的配置信息会保存到元数据表中，扩缩容需要添加服务器节点，调休租户的Unit_Num大小，这些操作都需要保存到元数据表中，我们可以连接系统租户数据库查看元数据表的内容，查看zone、查看节点、查看租户、查看Unit等。
1.连接到系统租户
obclient -h192.168.113.161 -P2883 -uroot@sys#myoceanbase -p***** -A

-u ：租户的连接账户，格式有：用户名@租户名#集群名，系统租户MySQL模式，默认用户名为root，租户为sys，集群名在创建集群时设置的，集群名可以不写。

-p：提供账户密码，为了安全可以不提供，改为在后面提示符下输入，密码文本不可见

-A：表示在 OBClient 连接数据库时不自动获取统计信息

2.查看zone和observer
# 查看zone
SELECT * FROM oceanbase.DBA_OB_ZONES;

STATUS: ACTIVE为可用状态，INACTIVE为不可用状态

# 查看节点
SELECT * FROM oceanbase.DBA_OB_SERVERS;

查询结果中的相关字段说明如下：

  • SVR_IP：节点 IP。
  • SVR_PORT：节点的 RPC 端口。
  • ZONE：节点所在的 Zone。
  • SQL_PORT：节点的 SQL 端口，可以使用该端口通过直连方式连接 OceanBase 数据库。
  • WITH_ROOTSERVER：该节点是否为集群 RS（RootServer），RS 负责处理集群管理操作。
  • STATUS：节点的状态。ACTIVE：表示该节点为可用状态。INACTIVE：表示该节点为宕机状态。DELETING：表示该节点正在被删除。
  • STOP_TIME：节点停止服务的时间点。如果值为 NULL，表示节点服务正常运行。
  • START_SERVICE_TIME：节点开始服务的时间点。如果值为 NULL，表示节点未提供服务。
  • BLOCK_MIGRATE_IN_TIME：禁止副本迁入的开始时间点。如果为 NULL，表示副本正常迁入。
3.添加节点
3.1.节点需安装OceanBase软件包，并启动observer进程

在OecanBase添加节点前需要在节点上安装OceanBase软件，设置数据存储目录，在oceanbase-all-in-one-4.2.1.1-xxxx86_64.tar.gz的rpms目录中有安装包
在这里插入图片描述

1.安装rpm包，主要是oceanbase-ce 和oceanbase-ce-libs，都可以安装
rpm -ivh $rpm_name

2.初始化 OceanBase 数据库的目录，$cluster_name是集群名
mkdir -p /data/1/$cluster_name/{etc3,sort_dir,sstable,slog} 
mkdir -p /data/log1/$cluster_name/{clog,etc2,ilog,oob_clog} 
mkdir -p /home/admin/oceanbase/store/$cluster_name
for t in {etc3,sort_dir,sstable,slog};do ln -s /data/1/$cluster_name/$t /home/admin/oceanbase/store/$cluster_name/$t; done
for t in {clog,etc2,ilog,oob_clog};do ln -s /data/log1/$cluster_name/$t /home/admin/oceanbase/store/$cluster_name/$t; done

3.启动observer进程
/home/root/oceanbase/bin/observer -I 192.168.113.164 -P 2882 -p 2881 -z zone1 -d /home/root/oceanbase/store/myoceanbase -r '192.168.113.161:2882:2881' -c 20240119 -n myoceanbase -o "system_memory=10GB,datafile_size=100G,config_additional_dir=/data/1/myoceanbase/etc3;/data/log1/myoceanbase/etc2"

启动observer进程相关参数说明如下：

  • -I：参数用于指定待启动的节点 IP。在多机部署场景下，不能指定 127.0.0.1 作为目标 IP。
  • -c：用于指定集群 ID。其值可通过 SHOW PARAMETERS LIKE 'cluster_id'; 语句获取。
  • -p：用于指定 SQL 端口号。一般为 2881，除非有明确目的，一般不建议修改。
  • -P：用于指定 RPC 端口号。一般为 2882，除非有明确目的，不建议修改。
  • -n：用于指定集群名。其值可通过 SHOW PARAMETERS LIKE 'cluster'; 语句获取。本示例中集群名为 myoceanbase。
  • -z：用于指定待加入的 Zone。可通过视图 DBA_OB_ZONES 查看集群中的 Zone 名。
  • -d：用于指定数据目录。
  • -r：用于指定待添加的 OceanBase 集群的 RS 地址列表。
  • -l：用于指定日志的级别，本示例中为 WARN，表示日志级别为 WARNING 级别。
  • -o：用于指定集群的启动配置项，需要根据实际情况配置。
    • system_memory：用于指定 OceanBase 数据库内部保留内存，10G，默认是 30G。
    • datafile_size：用于指定 OceanBase 数据库数据文件 SSTable 的大小（一次性初始化），根据 /data/1/ 可用空间评估，建议不少于 100G，同时又保留一些剩余空间。
    • config_additional_dir：用于指定参数文件的冗余目录。

如果需要添加多个节点，请重复执行上面添加节点操作。

3.2.向OceanBase集群添加节点

添加节点后，就需要连接集群，把节点添加到元数据表中

1.连接系统租户数据库
obclient -h192.168.113.161 -P2883 -uroot@sys#myoceanbase -p***** -A

2.向集群的 Zone 中添加节点
ALTER SYSTEM ADD SERVER 'svr_ip:svr_port' [,'svr_ip:svr_port'...] [ZONE [=] 'zone_name'];
ALTER SYSTEM ADD SERVER '192.168.113.164:2882','192.168.113.165:2882' ZONE 'zone4';

3.查询 DBA_OB_SERVERS 进行确认
SELECT * FROM oceanbase.DBA_OB_SERVERS;

增加节点后，节点所在的 Zone 内有更多的节点容纳 Unit，从而可以执行后续的迁移 Unit、调整租户的 UNIT_NUM 以及新建租户等操作

3.3.扩容，调整租户UNIT_NUM大小

租户扩容和缩容本质上是提高和降低租户的服务能力，包括计算能力和存储容量。可以通过提高单节点的服务能力达成，也可以通过增加服务节点达成。

下面通过调整Unit_Num大小来达到租户总服务能力的提升或降低，实现租户的扩容或缩容。

从 V4.0.0 版本开始，OceanBase 数据库要求租户内每个 Zone 的 Unit 个数必须保持一致

  • 有个前提条件，设置租户内的负载均衡策略，租户内的负载均衡策略由租户级配置项 enable_rebalance 和 enable_transfer 共同控制，它们的默认值为 true，设置后不需要重启 OBServer 节点，立即生效。当他们的值为true时，表示在进行租户扩缩容操作时，系统会自动调整分区分布，实现负载均衡。

    ALTER SYSTEM SET enable_rebalance = true TENANT = 'tenant_name';
ALTER SYSTEM SET enable_transfer = true TENANT = 'tenant_name';

#系统租户开启所有用户租户（不含 sys 租户和 Meta 租户）的租户内负载均衡和租户下的 Transfer 功能
ALTER SYSTEM SET enable_rebalance = true TENANT = all;
ALTER SYSTEM SET enable_transfer = true TENANT = all;

调整Unit_Num大小，来给租户扩缩容

  • 1.连接系统租户数据库

    obclient -h192.168.113.161 -P2883 -uroot@sys#myoceanbase -p***** -A

  • 2.use oceanbase;

    可以 show tables; 看看有很多系统内置的表
    在这里插入图片描述

  • 3.查看租户 mysql001 信息，获取其 TENANT_ID。

    SELECT * FROM oceanbase.DBA_OB_TENANTS WHERE TENANT_NAME = 'ocp';

    查询结果中，UNIT_NUM 的值为 1 表示租户的 Unit Number 数为 1。

    在这里插入图片描述

  • 4.查看租户 ocp 所拥有的 Unit，在3台服务器上分别有一个Unit，一主两从。

    SELECT * FROM oceanbase.DBA_OB_UNITS WHERE TENANT_ID = 1002;

    在这里插入图片描述

  • 5.把租户 mysql001 的 UNIT_NUM 修改为 2。

    ALTER RESOURCE TENANT mysql001 UNIT_NUM = 2;

  • 6.查看调大 Unit Number 任务的执行状态。

    SELECT * FROM oceanbase.DBA_OB_TENANT_JOBS WHERE JOB_TYPE='ALTER_RESOURCE_TENANT_UNIT_NUM' AND TENANT_ID=1006;

  • 7.再次查看租户 mysql001 修改后的 Unit。

    SELECT * FROM oceanbase.DBA_OB_UNITS WHERE TENANT_ID = 1006;

  • 8.通过随机删除 UNIT_GROUP 的方式来调小 UNIT_NUM 的数量

    ALTER RESOURCE TENANT mysql001 UNIT_NUM = 1;

参考了官方文档：
https://www.oceanbase.com/docs/common-oceanbase-database-cn-1000000000507927
https://www.oceanbase.com/docs/common-oceanbase-database-cn-1000000000508357

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1397050.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

LeetCode、2300. 咒语和药水的成功对数【中等，排序+二分】

LeetCode、2300. 咒语和药水的成功对数【中等，排序+二分】

文章目录 前言LeetCode、2300. 咒语和药水的成功对数【中等，排序二分】题目及类型思路及代码 资料获取 前言 博主介绍：✌目前全网粉丝2W，csdn博客专家、Java领域优质创作者，博客之星、阿里云平台优质作者、专注于Java后端技术领域…
阅读更多...
聚铭入选“2023中国数字安全能力图谱（精选版）”安全运营领域

聚铭入选“2023中国数字安全能力图谱（精选版）”安全运营领域

近日，国内权威数字安全领域第三方调研机构数世咨询正式发布《2023年度中国数字安全能力图谱（精选版）》。聚铭网络作为国内领先的安全运营商，凭借在细分领域突出优势，成功入选该图谱“安全运营”领域代表厂商。 据悉&a…
阅读更多...
python tkinter 最简洁的计算器按钮排列

python tkinter 最简洁的计算器按钮排列

代码如下，只要再加上按键绑定事件函数，计算器既可使用了。 import tkinter as tk from tkinter.ttk import Separator,Buttonif __name__ __main__:Buttons [[%,CE,C,←],[1/x,x,√x,],[7, 8, 9, x],[4, 5, 6, -],[1, 2, 3, ],[, 0, ., ]]root tk.T…
阅读更多...
MyBatis 使用报错： Can‘t generate mapping method with primitive return type

MyBatis 使用报错： Can‘t generate mapping method with primitive return type

文章目录 前言问题原因解决方案个人简介 前言 今天在新项目中使用 MyBatis 报如下错误：Cant generate mapping method with primitive return type 问题原因 发现是 Mapper 注解引入错误，错误引入 org.mapstruct.Mapper, 实际应该引入 org.apache.ibat…
阅读更多...
FlinkAPI开发之状态管理

FlinkAPI开发之状态管理

案例用到的测试数据请参考文章： Flink自定义Source模拟数据流 原文链接：https://blog.csdn.net/m0_52606060/article/details/135436048 Flink中的状态 概述 有状态的算子 状态的分类 托管状态（Managed State）和原始状态&…
阅读更多...
如何实现 H5 秒开？

如何实现 H5 秒开？

我在简历上写了精通 H5，结果面试官上来就问： 同学，你说你精通 H5 ，那你能不能说一下怎么实现 H5 秒 由于没怎么做过性能优化，我只能凭着印象，断断续续地罗列了几点： 网络优化：http2、…
阅读更多...
JOSEF约瑟 双位置继电器UEG/C-4H4D AC220V 新款导轨安装 端子号可订做

JOSEF约瑟 双位置继电器UEG/C-4H4D AC220V 新款导轨安装 端子号可订做

系列型号： UEG/C-2H双稳态中间继电器；UEG/C-1H1D双稳态中间继电器； 双稳态中间继电器UEG/C-4H4D；UEG/C-3H1D双稳态中间继电器； UEG/C-2H2D双稳态中间继电器；UEG/C-4H双稳态中间继电器； UEG/…
阅读更多...
HarmonyOS—开发环境诊断的功能

HarmonyOS—开发环境诊断的功能

为了大家开发应用/服务的良好体验，DevEco Studio提供了开发环境诊断的功能，帮助大家识别开发环境是否完备。可以在欢迎界面单击Help > Diagnose Development Environment进行诊断。如果已经打开了工程开发界面，也可以在菜单栏单击Help >…
阅读更多...
04 SpringBoot整合Druid/MyBatis/事务/AOP+打包项目

04 SpringBoot整合Druid/MyBatis/事务/AOP+打包项目

整合Druid 项目结构&#xff1a; 引入依赖&#xff1a; <?xml version"1.0" encoding"UTF-8"?> <project xmlns"http://maven.apache.org/POM/4.0.0"xmlns:xsi"http://www.w3.org/2001/XMLSchema-instance"xsi:schemaL…
阅读更多...
【网站项目】331基于jsp的超市库存商品管理系统

【网站项目】331基于jsp的超市库存商品管理系统

&#x1f64a;作者简介&#xff1a;多年一线开发工作经验&#xff0c;分享技术代码帮助学生学习&#xff0c;独立完成自己的项目或者毕业设计。 代码可以私聊博主获取。&#x1f339;赠送计算机毕业设计600个选题excel文件&#xff0c;帮助大学选题。赠送开题报告模板&#xff…
阅读更多...
【C语言深度剖析——第三节（关键字3）】《C语言深度解剖》+蛋哥分析+个人理解

【C语言深度剖析——第三节（关键字3）】《C语言深度解剖》+蛋哥分析+个人理解

本文由睡觉待开机原创&#xff0c;未经允许不得转载。 本内容在csdn网站首发 欢迎各位点赞—评论—收藏 如果存在不足之处请评论留言&#xff0c;共同进步&#xff01; 目录 1.基本数据类型2.sizeof关键字 前言&#xff1a; 本期我们继续探讨关于C深度解剖这本书相关内容&#…
阅读更多...
AI智慧导诊系统（源码），利用人工智能技术，通过根据患者症状描述智能推荐挂号科室。

AI智慧导诊系统（源码），利用人工智能技术，通过根据患者症状描述智能推荐挂号科室。

什么是智慧导诊系统? 简单地说&#xff0c;智慧导诊系统是一种利用人工智能技术&#xff0c;为医生提供帮助的系统。它可以通过分析患者的症状和病史为医生提供疾病诊断和治疗方案的建议。 智慧导诊系统可根据患者症状描述智能推荐挂号科室。系统采用对话式询问患者症状&…
阅读更多...
C++初阶类与对象（二）：详解构造函数和析构函数

C++初阶类与对象（二）：详解构造函数和析构函数

上次为类与对象开了一个头&#xff1a;C初阶类与对象&#xff08;一&#xff09;&#xff1a;学习类与对象、访问限定符、封装、this指针 今天就来更进一步 文章目录 1.类的6个默认成员函数2.构造函数2.1引入和概念2.2构造函数特性2.2.1特性1~42.2.2注意2.2.3特性5~72.2.4注意 …
阅读更多...
安装布隆过滤器

安装布隆过滤器

上传并解压文件解压文件 tar -zxvf RedisBloom-2.2.4.tar.gz 进入解压好的文件 make一下 返回进入conf 配置文件 loadmodule /usr/local/etc/redis/redisbloom.so 粘入 拷贝redisbloom.so到容器 : docker cp redisbloom.so redis:/usr/local/etc/redis 重启redis : docker …
阅读更多...
如何编写一个好的测试用例？才能防止背黑锅

如何编写一个好的测试用例？才能防止背黑锅

如何编写一个好的测试用例&#xff1f;才能防止背黑锅 什么是测试用例&#xff1f;一个好的测试用例包含什么&#xff1f;测试用例的编写思路总结 什么是测试用例&#xff1f; 在这之前&#xff0c;思考一个问题&#xff0c;下面这个简单的QQ登录页面&#xff0c;一共又多少条…
阅读更多...
Sentinel 轨道数据及下载

Sentinel 轨道数据及下载

Sentinel卫星轨道文件在处理Sentinel卫星数据时发挥着关键作用。这些轨道文件包含了有关卫星在轨道上的运动、位置、姿态等信息&#xff0c;对于地理校正、成像几何校正以及多时相分析等方面具有重要作用。以下是Sentinel卫星轨道文件的主要作用&#xff1a; 地理校正&#xff…
阅读更多...
为 OpenCV 编写文档(二)

为 OpenCV 编写文档(二)

常用命令 这里通过简短的示例描述了最常用的 doxygen 命令。有关可用命令的完整列表和详细说明&#xff0c;请访问命令参考。 基本命令 brief - 带有简要实体描述的段落 param - 函数参数的描述。 多个相邻语句合并到一个列表中。如果在实际函数签名中找不到具有此名称的参数…
阅读更多...
docker 使用 vcs/2018 Verdi等 eda 软件

docker 使用 vcs/2018 Verdi等 eda 软件

好不容易在ubuntu 安装好了eda软件&#xff0c;转眼就发现了自己的无知。 有博主几年前就搞定了docker上的EDA工具。而且更全&#xff0c;更简单。只恨自己太无知啊。 Synopsys EDA Tools docker image - EDA资源使用讨论 - EETOP 创芯网论坛 (原名&#xff1a;电子顶级开发网…
阅读更多...
基于SpringBoot Vue博物馆管理系统

基于SpringBoot Vue博物馆管理系统

大家好✌&#xff01;我是Dwzun。很高兴你能来阅读我&#xff0c;我会陆续更新Java后端、前端、数据库、项目案例等相关知识点总结&#xff0c;还为大家分享优质的实战项目&#xff0c;本人在Java项目开发领域有多年的经验&#xff0c;陆续会更新更多优质的Java实战项目&#x…
阅读更多...
Python自动化实战之接口请求的实现

Python自动化实战之接口请求的实现

在前文说过&#xff0c;如果想要更好的做接口测试&#xff0c;我们要利用自己的代码基础与代码优势&#xff0c;所以该章节不会再介绍商业化的、通用的接口测试工具&#xff0c;重点介绍如何通过 python 编码来实现我们的接口测试以及通过 Pycharm 的实际应用编写一个简单接口测…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023