文章目录
-
- 摘要
- 在 IDC 搭建读写分离 redis 集群
-
- 一、环境准备
- 二、部署主从架构
-
- 1. 安装Redis
- 2. 配置主节点
- 3. 配置从节点
- 4. 所有 Redis 节点设置开机自启动
- 三、部署代理层（读写分离）
-
- 1. 安装Twemproxy
- 2. 配置Twemproxy
- 3. 配置开机自启动
- 四、高可用配置（哨兵模式）
-
- 1. 配置哨兵节点
- 2. 故障转移验证
- 3. 配置开机自启动
- 数据存量和增量同步至 IDC redis Master 节点
- 可能遇到的问题
-
- 1. redis-server: command not found
- 2. redis slave 节点启动时报了 Error condition on socket for SYNC: No route to host
摘要
为了降本，将云上非核心业务迁移至 IDC
云上 Redis 配置
Redis版本5.0，架构读写分离版本
操作流程：
- 在 IDC 搭建读写分离 redis 集群
- 数据存量和增量同步至 IDC redis 集群
- 业务切换 redis 源，暂停第二步
4.（可选）切完源后反向同步至云上，业务正常后再去掉反向同步，退掉云上资源；
在 IDC 搭建读写分离 redis 集群
一、环境准备
-
服务器规划
- 主节点（Master）：1台，负责处理写请求（如10.16.24.97）
- 从节点（Slave）：至少2台，负责处理读请求（如10.16.24.98, 10.16.24.99）
- 代理层（Proxy）：1台，实现读写分离路由（如10.16.24.96）
- 哨兵节点（Sentinel）：3台，实现高可用（可与主从节点共用）
-
软件版本
- Redis建议使用与阿里云相同的版本（如5.0+）
- 代理工具：Twemproxy（Nutcracker）或HAProxy，本次选用 Twemproxy
- 哨兵机制：Redis Sentinel
二、部署主从架构
1. 安装Redis
所有节点执行：
wget https://download.redis.io/redis-5.0.4.tar.gz
tar -xzvf redis-5.0.4.tar.gz
cd redis-5.0.4
make && make install
所有节点需要开放 6379 端口：
firewall-cmd --add-port=6379/tcp --permanent
firewall-cmd --reload
2. 配置主节点
修改主节点配置文件（redis.conf）：
bind 0.0.0.0
port 6379
requirepass your_password
masterauth your_password
appendonly yes
daemonize no
# 持久化配置
save 900 1
save 300 10
save 60 10000
appendonly yes
appendfilename "appendonly.aof"
appendfsync everysec
# 性能优化
protected-mode no
rename-command FLUSHALL ""
rename-command FLUSHDB ""
rename-command CONFIG ""
启动主节点：
redis-server /path/to/redis.conf
3. 配置从节点
从节点配置文件（redis.conf）添加：
bind 0.0.0.0
port 6379
requirepass your_password
masterauth your_password
replicaof 10.16.24.97 6379 # 指向主节点
# 持久化配置
save 900 1
save 300 10
save 60 10000
appendonly yes
appendfilename "appendonly.aof"
appendfsync everysec
# 性能优化
protected-mode no
rename-command FLUSHALL ""
rename-command FLUSHDB ""
rename-command CONFIG ""
启动从节点：
redis-server /path/to/redis.conf
验证主从状态：
redis-cli -h 10.16.24.97 -a your_password info replication
Warning: Using a password with '-a' or '-u' option on the command line interface may not be safe.
# Replication
role:master
connected_slaves:2
slave0:ip=10.16.24.98,port=6379,state=online,offset=9898,lag=0
slave1:ip=10.16.24.99,port=6379,state=online,offset=9898,lag=1
master_replid:90147807e0eec59a6de3a41a11f264d259b43b08
master_replid2:0000000000000000000000000000000000000000
master_repl_offset:9898
second_repl_offset:-1
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:1
repl_backlog_histlen:9898
4. 所有 Redis 节点设置开机自启动
创建 service 文件 /etc/systemd/system/redis.service
[Unit]
Description=Redis In-Memory Data Store
After=network.target
[Service]
ExecStart=/root/redis-5.0.4/src/redis-server /root/redis-5.0.4/redis.conf
Restart=always
[Install]
WantedBy=multi-user.target
保存后执行
systemctl daemon-reload
systemctl enable redis
三、部署代理层（读写分离）
1. 安装Twemproxy
# 安装 git
yum install -y git
# 安装 autoconf automake libtool
yum install autoconf automake libtool
# 安装Twemproxy
git clone https://github.com/twitter/twemproxy
cd twemproxy
autoreconf -fvi
./configure --enable-debug=log
make
src/nutcracker --version # 验证安装
2. 配置Twemproxy
创建配置文件（nutcracker.yml）：
alpha:
listen: 0.0.0.0:22121
hash: crc32
distribution: modula
redis: true
redis_auth: your_password
servers:
- 10.16.24.97:6379:1 master_node
- 10.16.24.98:6379:2 slave_node_1
- 10.16.24.99:6379:2 slave_node_2
启动Twemproxy：
src/nutcracker -c /path/to/nutcracker.yml -d
应用通过连接代理IP（192.168.1.103:22121）实现自动读写分离。
3. 配置开机自启动
创建 service 文件 /etc/systemd/system/twemproxy.service
[Unit]
Description=Redis Proxy
After=network.target
[Service]
ExecStart=/root/twemproxy/src/nutcracker -c /root/nutcracker.yml -o /var/log/twemproxy.log
Restart=always
[Install]
WantedBy=multi-user.target
保存后执行
systemctl daemon-reload
systemctl enable twemproxy
四、高可用配置（哨兵模式）
1. 配置哨兵节点
每个哨兵节点创建sentinel.conf：
sentinel monitor mymaster 10.16.24.97 6379 2
sentinel auth-pass mymaster your_password
sentinel down-after-milliseconds mymaster 5000
sentinel failover-timeout mymaster 10000
logfile "/var/log/redis/sentinel.log"
设置日志文件权限
mkdir -p /var/log/redis
chmod 755 /var/log/redis
开放端口，让哨兵节点之间可通讯
firewall-cmd --add-port=26379/tcp --permanent
firewall-cmd --reload
启动哨兵：
redis-sentinel /path/to/sentinel.conf
2. 故障转移验证
手动停止主节点，观察哨兵日志是否选举新主节点。
使用 tail 命令动态跟踪日志：
```bash
tail -f /var/log/redis/sentinel.log
**故障转移日志特征**
在日志中搜索以下关键事件以验证故障转移：
1. **主节点下线检测**：
```log
+sdown master mymaster 10.16.24.97 6379 # Sentinel标记主节点主观下线
- 故障转移触发：
Start of election for master mymaster # 开始选举新主节点 - 新主节点选举：
+elected-leader master mymaster 10.16.24.97 6379 # 新主节点被选举 - 从节点重新配置：
Reconfiguring the slave to replicate new master # 从节点切换到新主节点
验证步骤
- 手动触发故障转移：
关闭原主节点 10.16.24.97 Redis 服务，观察 Sentinel 日志是否触发选举和切换[[7]][[8]]。 - 检查最终状态：
日志中应显示新主节点的 IP 和端口，例如：2527:X 19 Mar 2025 17:29:54.080 # oO0OoO0OoO0Oo Red
