达梦数据库简要概述
达梦数据库(DM Database)是一款由武汉达梦公司开发的关系型数据库管理系统,支持多种高可用性和数据同步方案。在主从模式(也称为 Master-Slave 或 Primary-Secondary 模式)中,主要通过以下几种方式来实现数据的复制和高可用性:
主从复制模式概述
-
实时归档
- 在这种模式下,主库(Primary)将日志信息实时发送到备库(Secondary)。一旦主库发生事务操作,相关的日志会立即被传输到备库,并在备库上重演这些日志,以保持数据的一致性。
-
即时归档
- 即时归档要求主库在每次提交事务前等待备库确认已经收到并记录了相关日志信息。这种方式提供了更高的数据一致性保证,但可能会影响性能,因为它增加了事务提交的延迟。
-
定时归档
- 定时归档允许配置一个时间间隔,在这个间隔内主库会批量地向备库发送日志文件。这种方式适合于对数据一致性要求不是极高,且希望减少网络流量和提高效率的情况。
-
异步归档
- 异步归档不要求主库等待备库的确认即可完成事务提交。这提高了主库的性能,但是降低了数据同步的及时性,因为如果主库出现故障,最近的一些更新可能还未被复制到备库。
主从模式的优点
- 高可用性:当主服务器出现故障时,可以快速切换到备用服务器,减少停机时间。
- 负载均衡:可以通过只读副本分担查询负载,减轻主服务器的压力。
- 灾难恢复:提供了一种有效的灾难恢复机制,确保数据的安全性和可恢复性。
注意事项
- 需要根据实际的应用场景选择合适的复制策略,平衡好数据一致性、性能以及可用性的需求。
- 在配置主从复制时,还需要考虑网络带宽、延迟等因素的影响,以确保数据能够高效准确地同步。
一、查看使用的linux版本以及架构信息
二、下载指定版本
三、修改主机名
主库 192.168.116.99 实例名 dmdb-0001
从库 192.168.116.34 实例名 dmdb-0002
四、关闭防火墙
systemctl stop firewalld && systemctl disable firewalld
五、创建dmdba用户和组
创建用户所在的组,命令如下:
groupadd dinstall -g 2001
创建用户,命令如下:
useradd -G dinstall -m -d /data/dmdba -s /bin/bash -u 2001 dmdba
修改用户密码,命令如下:
passwd dmdba
注意:密码需要字母大小写加数字特殊字符
六、修改主从的 文件
使用 root 用户打开 /etc/security/limits.conf 文件进行修改,命令如下:
vim /etc/security/limits.conf
在最后添加下面的语句,需添加的语句如下:
dmdba soft nice 0
dmdba hard nice 0
dmdba soft as unlimited
dmdba hard as unlimited
dmdba soft fsize unlimited
dmdba hard fsize unlimited
dmdba soft nproc 65536
dmdba hard nproc 65536
dmdba soft nofile 65536
dmdba hard nofile 65536
dmdba soft core unlimited
dmdba hard core unlimited
dmdba soft data unlimited
dmdba hard data unlimited
切换到 dmdba 用户,查看是否生效,命令如下:
su dmdba
ulimit -a
不生效的话重启服务器
七、规划相关目录
可根据实际需求规划安装目录,本示例使用默认配置 DM 数据库安装在 /data/dmdba 文件夹下。
1、实例存储目录
mkdir -p /data/dmdba/dmdata
2、归档存储目录
mkdir -p /data/dmdba/arch
2、备份存储目录
mkdir -p /data/dmdba/dmbak
新建的路径目录权限的用户修改为 dmdba,用户组修改为 dinstall。
chown -R dmdba:dinstall /data/dmdba/
给路径下的文件设置 755 权限。
chmod -R 755 /data/dmdba
初始化数据库
./dminit PATH=/data/dmdba/dmdata PAGE_SIZE=32 CHARSET=1 CASE_SENSITIVE=0 SYSDBA_PWD=大小写特殊字符加数字 SYSAUDITOR_PWD=大小写特殊字符加数字 DB_NAME=dm INSTANCE_NAME=dm1 PORT_NUM=5236
dmdba用户前台启动实例主从库都执行一下,生成实例对应文件,启动后关闭即可
八、主库进行脱机备份
脱机备份前要关闭数据库实例,否则备份会出错,为了保证数据同步前的一致性。
在主库 data/dmdba/dmdbms/bin目录下执行
cd /data/dmdba/dmdbms/bin
./dmrman
BACKUP DATABASE '/data/dmdba/dmdata/dm/dm.ini' FULL BACKUPSET '/data/dmdba/dmbak/full_database';
然后把主库备份文件发送到从库
scp -r /data/dmdba/dmbak/full_database 192.168.116.34:/data/dmdba/dmbak/full_database
然后来到从库进行恢复操作
cd /data/dmdba/dmdbms/bin
./dmrman
RESTORE DATABASE '/data/dmdba/dmdata/dm/dm.ini' FROM BACKUPSET '/data/dmdba/dmbak/full_database';
RECOVER DATABASE '/data/dmdba/dmdata/dm/dm.ini' UPDATE DB_MAGIC;
九、修改并编辑数据库配置文件编辑
实例配置文件:dm.ini
归档配置文件:dmarch.ini
MAL系统配置文件:dmmal.ini
守护进程配置文件:dmwatcher.ini
监视器配置文件:dmmonitor.ini
1、主库修改/data /dmdba/dmdata/dm/dm.ini
INSTANCE_NAME = dm1 #修改实例名
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
2、从库修改/data /dmdba/dmdata/dm/dm.ini
INSTANCE_NAME = dm2 #修改实例名
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
3、主库配置归档配置文件/data /dmdba/dmdata/dm/dmarch.ini
[ARCHIVE_REALTIME]
ARCH_TYPE = REALTIME #归档类型
ARCH_DEST = dm2 #归档目标实例名(主库侧填写备库实例名)
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /data/dmdba/arch/ #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 MB,本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 MB,0 表示无限制,范围 1024~4294967294 MB
4、从库配置归档配置文件/data /dmdba/dmdata/dm/dmarch.ini
[ARCHIVE_REALTIME]
ARCH_TYPE = REALTIME
ARCH_DEST = dm1
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL
ARCH_DEST = /data/dmdba/arch/
ARCH_FILE_SIZE = 128
ARCH_SPACE_LIMIT = 0
5、MAL系统配置文件/data/dmdba/dmdata/dm/dmmal.ini
主从库配置一样
MAL_CHECK_INTERVAL = 5 # MAL链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 5 # 判定 MAL链路断开的时间
[MAL_INST1]
MAL_INST_NAME = dm1 #与 dm.ini中的 INSTANCE_NAME一致
MAL_HOST = 主库IP # MAL系统监听 TCP 内部网络 IP
MAL_PORT = 61141 # MAL系统监听 TCP连接的端口
MAL_INST_HOST = 主库IP #实例的对外服务 IP地址
MAL_INST_PORT = 5236 #与 dm.ini中的 PORT_NUM一致
MAL_DW_PORT = 52141 #实例对应的守护进程监听 TCP 端口
MAL_INST_DW_PORT = 33141
[MAL_INST2]
MAL_INST_NAME = dm2 #与 dm.ini中的 INSTANCE_NAME 一致
MAL_HOST = 从库IP # MAL系统监听 TCP内部网络 IP
MAL_PORT = 61141 # MAL系统监听 TCP连接的端口
MAL_INST_HOST = 从库IP #实例的对外服务 IP地址
MAL_INST_PORT = 5236 #与 dm.ini中的 PORT_NUM一致
MAL_DW_PORT = 52141 #实例对应的守护进程监听 TCP端口
MAL_INST_DW_PORT = 33141
6、守护进程配置文件 /data/dmdba/dmdata/dm/dmwatcher.ini
主从库配置一样
[GRP_RW]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 453331 #守护系统唯一 OGUID 值
INST_INI = /data/dmdba/dmdata/dm/dm.ini # dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /data/dmdba/dmdbms/bin/dmserver #命令行方式启动
7、监视器配置文件 /data/dmdba/dmdata/dm/dmmonitor.ini
可以放主库也可以放从库,更可以放第三台机上
MON_DW_CONFIRM = 1 #确认监视器模式
MON_LOG_PATH = /data/dmdba/dmdata/dmmonitor_auto/log #监视器日志文件存放路径可以自定义,没有自行创建
MON_LOG_INTERVAL = 60 #每隔 60 s 定时记录系统信息到日志文件
MON_LOG_FILE_SIZE = 32 #每个日志文件最大 32 MB
MON_LOG_SPACE_LIMIT = 0 #不限定日志文件总占用空间
[GRP_RW]
MON_INST_OGUID = 453331 #组 GRP_RW 的唯一 OGUID 值
#以下配置为监视器到组 GRP_RW 的守护进程的连接信息,以“IP:PORT”的形式配置
#IP 对应 dmmal.ini 中的 MAL_HOST,PORT 对应 dmmal.ini 中的 MAL_DW_PORT
MON_DW_IP = 主库:52141
MON_DW_IP = 从库:52141
十、启动主从数据库
主库启动(以挂载的形式启动)
cd /data/dmdba/dmdbms/bin
./dmserver /data/dmdba/dmdata/dm/dm.ini mount
启动成功后新开一个窗口,切换dmdba用户
使用disql工具连接数据库注意使用cd /data/dmdba/dmdbms/bin
./disql
用户/密码是前面初始化时设置的密码
从库启动(以挂载的形式启动)
cd /data/dmdba/dmdbms/bin
./dmserver /data/dmdba/dmdata/dm/dm.ini mount
启动成功后新开一个窗口,切换dmdba用户
使用disql工具连接数据库注意使用cd /data/dmdba/dmdbms/bin
./disql
用户/密码是前面初始化时设置的密码
十一、配置主从模式
主库执行操作
SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
sp_set_oguid(453331); #修改 oguid
alter database primary; #修改为 primary 模式
SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
执行完以上操作记得exit退出sql命令行
从库执行操作
SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
sp_set_oguid(453331); #修改 oguid
alter database standby; #修改为 standby 模式
SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
执行完以上操作记得exit退出sql命令行
启动守护进程
主从库使用dmdba用户执行相同操作
cd /data/dmdba/dmdbms/bin
./dmwatcher /data/dmdba/dmdata/dm/dmwatcher.ini
启动监视器
在安装有监视器的机器执行新开一个窗口注意使用dmdba用户
cd /data/dmdba/dmdbms/bin
./dmmonitor /data/dmdba/dmdata/dm/dmmonitor.ini
监视器显示WSTATUS(OPEN)、ISTATUS(OPEN)、RTYPE(REALTIME)、RSTAT(VALID)有数据表名主从搭建完成。
验证数据同步状态
主库使用dmdba用户登录然后再用disql工具连接
创建表插入数据
cd /data/dmdba/dmdbms/bin
./disql
用户/密码是前面初始化时设置的密码
create table test(id int, name varchar2(30)); #创建表
insert into test values (1, 'one'); #插入数据
select * from test; #查看表数据
commit;
select * from date;
从库验证创建的表以及插入的数据
从库使用dmdba用户登录数据库再用用disql工具查看同步数据
./disql
用户/密码是前面初始化时设置的密码
注册服务
上面操作都是前台启动的方式,关闭窗口就会退出,下面我们将启动命令注册为系统服务。
主从库都操作使用root用户到数据库安装目录
注册守护进程服务
cd /data/dmdba/dmdbms/script/root/
./dm_service_installer.sh -t dmwatcher -p dmrw -dm_ini /data/dmdba/dmdata/dm/dm.ini -watcher_ini /data/dmdba/dmdata/dm/dmwatcher.ini
注册数据库实例服务
./dm_service_installer.sh -t dmserver -p dmrw -dm_ini /data/dmdba/dmdata/dm/dm.ini
注册监视器服务(只在安装监视器的机器上执行)
./dm_service_installer.sh -t dmmonitor -p confirm -dm_ini /data/dmdba/dmdata/dm/dm.ini -monitor_ini /data/dmdba/dmdata/dm/dmmonitor.ini
使用启动命令启动服务
先将之前用前台启动的窗口关掉
启动数据库(主从都启动)
systemctl start DmServicedmrw
启动守护进程(主从都启动)
systemctl start DmWatcherServicedmrw
启动监视器(主库启动)
systemctl start DmMonitorServiceconfirm
注意启动和关闭顺序
启动 主库启动 → 从库启动 → 主库守护进程 → 从库守护进程 → 监视器
停止 监视器 → 主库守护进程 → 从库守护进程 → 从库停止 → 主库停止