当前位置： 首页 > news >正文

Redis 集群模式

news 来源：原创 2024/9/20 6:42:43

文章目录

  • 前言
    • 1. Redis Cluster 搭建
    • 1.1 准备节点
    • 1.2 准备配置文件
    • 1.3 查看集群状态
  • 2. 客户端访问
  • 3. Python 连接集群
  • 4. Redis 集群维护
    • 4.1 新增节点
    • 4.2 手动分配 slot
    • 4.3 节点移除
  • 5. 集群运维
    • 5.1 集群倾斜
    • 5.2 手动切换

前言

Redis 3.0 提供了 Redis Cluster 架构，有效解决 Redis 分布式方面的需求。当遇到单机内存、并发、流量瓶颈时，可以使用 Redis 集群模式解决，达到负载均衡的目的。本篇文章将介绍 Redis 集群搭建运维。

1. Redis Cluster 搭建

由于服务器有限，这里演示部署的时候，采用了多实例的部署方式。

主机Redis 端口程序
172.16.104.576379、6389、6399Redis 7.0
172.16.104.566379、6389、6399Redis 7.0

1.1 准备节点

Redis Cluster 至少需要 6 个 Redis 节点才能组成完整的高可用集群。如下图，3 节点双副本。
在这里插入图片描述

1.2 准备配置文件

配置文件基本相同，除了端口和不同，6 套 Redis 服务，分别部署在两台服务器上。所以 Redis 的日志目录和工作目录都需要修改。
由于使用的是方式是多实例部署，6 套 Redis 服务分别部署在 2 台服务器上面，配置文件上会有细微的差别，下面是一个配置文件模版，需要修改的地方有：port、logfile、dir 三个参数。

# 节点端口
port 6379# 白名单
bind 0.0.0.0# 后台运行
daemonize yes# 日志目录
logfile "/data/redis/6379/redis.log"# RDB 目录
dbfilename "dump.rdb"# 工作目录
dir "/data/redis/6379"# AOF
appendonly no
appendfilename "appendonly.aof"# 密码验证
requirepass "Redis123"# 开启集群模式
cluster-enabled yes# 节点超时时间，单位毫秒
cluster-node-timeout 15000# 集群内配置文件
cluster-config-file "nodes-6379.conf"# 主库密码
masterauth "Redis123"

准备好对应的配置：

[root@172-16-104-57 redis]# ll redis_*
-rw-rw-r--. 1 redis redis 107542 7月   3 14:31 redis_6379.conf
-rw-r--r--. 1 redis redis 107542 7月   3 14:33 redis_6389.conf
-rw-r--r--. 1 redis redis 107542 7月   3 14:36 redis_6399.conf

启动 57 节点上的 Redis 服务：

redis-server redis_6379.conf
redis-server redis_6389.conf
redis-server redis_6399.conf

查看进程，确认 Redis 都已启动完成，在 56 服务器上重复上述操作：

[root@172-16-104-56 redis]# ps -ef|grep redis
root     113871      1  0 14:45 ?        00:00:00 redis-server 0.0.0.0:6379 [cluster]
root     113873      1  0 14:45 ?        00:00:00 redis-server 0.0.0.0:6389 [cluster]
root     113884      1  0 14:45 ?        00:00:00 redis-server 0.0.0.0:6399 [cluster]

在任意一个节点上，执行如下命令：

redis-cli -a "Redis123" --cluster create --cluster-replicas 1 172.16.104.57:6379 172.16.104.57:6389 172.16.104.57:6399 172.16.104.56:6379 172.16.104.56:6389 172.16.104.56:6399

输入 yes 后，创建集群：

>>> Performing hash slots allocation on 6 nodes...
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383
Adding replica 172.16.104.56:6399 to 172.16.104.57:6379
Adding replica 172.16.104.57:6399 to 172.16.104.56:6379
Adding replica 172.16.104.56:6389 to 172.16.104.57:6389
M: 4598508e4e82cb2261aca847a870123d8d4a5622 172.16.104.57:6379slots:[0-5460] (5461 slots) master
M: 322f148444e409d58dedcde5c111db2f73de80a2 172.16.104.57:6389slots:[10923-16383] (5461 slots) master
S: e83d857527b04d522f297a93ee50c65059f4981b 172.16.104.57:6399replicates 0da7e019328170fd63d2e9c6197e6d31b116e304
M: 0da7e019328170fd63d2e9c6197e6d31b116e304 172.16.104.56:6379slots:[5461-10922] (5462 slots) master
S: 796d75c8f043a3ca6d33677b8f3a533154f9fd19 172.16.104.56:6389replicates 322f148444e409d58dedcde5c111db2f73de80a2
S: 1d1e0552263e7410f7e165ce64097c7c9c74b39c 172.16.104.56:6399replicates 4598508e4e82cb2261aca847a870123d8d4a5622
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join
.
>>> Performing Cluster Check (using node 172.16.104.57:6379)
M: 4598508e4e82cb2261aca847a870123d8d4a5622 172.16.104.57:6379slots:[0-5460] (5461 slots) master1 additional replica(s)
M: 0da7e019328170fd63d2e9c6197e6d31b116e304 172.16.104.56:6379slots:[5461-10922] (5462 slots) master1 additional replica(s)
M: 322f148444e409d58dedcde5c111db2f73de80a2 172.16.104.57:6389slots:[10923-16383] (5461 slots) master1 additional replica(s)
S: e83d857527b04d522f297a93ee50c65059f4981b 172.16.104.57:6399slots: (0 slots) slavereplicates 0da7e019328170fd63d2e9c6197e6d31b116e304
S: 796d75c8f043a3ca6d33677b8f3a533154f9fd19 172.16.104.56:6389slots: (0 slots) slavereplicates 322f148444e409d58dedcde5c111db2f73de80a2
S: 1d1e0552263e7410f7e165ce64097c7c9c74b39c 172.16.104.56:6399slots: (0 slots) slavereplicates 4598508e4e82cb2261aca847a870123d8d4a5622
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

当输出 [OK] All 16384 slots covered. 表示集群创建成功。

1.3 查看集群状态

cluster nodes：查看集群拓扑信息：每个节点的 ID、身份、连接数和槽数等信息。从返回值可以看出，整个Redis 集群运行正常，其中包含三个主节点和三个从节点。
截屏2024-07-04 14.43.03.png

0da7e019328170fd63d2e9c6197e6d31b116e304 172.16.104.56:6379@16379 master - 0 1720071937000 4 connected 5461-10922
322f148444e409d58dedcde5c111db2f73de80a2 172.16.104.57:6389@16389 master - 0 1720071936000 2 connected 10923-16383
e83d857527b04d522f297a93ee50c65059f4981b 172.16.104.57:6399@16399 slave 0da7e019328170fd63d2e9c6197e6d31b116e304 0 1720071938000 4 connected
796d75c8f043a3ca6d33677b8f3a533154f9fd19 172.16.104.56:6389@16389 slave 322f148444e409d58dedcde5c111db2f73de80a2 0 1720071937915 2 connected
4598508e4e82cb2261aca847a870123d8d4a5622 172.16.104.57:6379@16379 myself,master - 0 1720071937000 1 connected 0-5460
1d1e0552263e7410f7e165ce64097c7c9c74b39c 172.16.104.56:6399@16399 slave 4598508e4e82cb2261aca847a870123d8d4a5622 0 1720071938921 1 connected

cluster info：查看全局集群信息：

cluster_state:ok
cluster_slots_assigned:16384
cluster_slots_ok:16384
cluster_slots_pfail:0
cluster_slots_fail:0
cluster_known_nodes:6
cluster_size:3
cluster_current_epoch:6
cluster_my_epoch:1
cluster_stats_messages_ping_sent:81881
cluster_stats_messages_pong_sent:90585
cluster_stats_messages_sent:172466
cluster_stats_messages_ping_received:90580
cluster_stats_messages_pong_received:81881
cluster_stats_messages_meet_received:5
cluster_stats_messages_received:172466
total_cluster_links_buffer_limit_exceeded:0

2. 客户端访问

Redis cluster 访问任意一个节点的时候，都可以自动计算 key 所在的位置，回返回一个 move 消息，告诉客户端 key 应该被分配在哪个节点上。
截屏2024-07-04 14.46.51.png

127.0.0.1:6379> set user1 wdwedwedwed
(error) MOVED 8106 172.16.104.56:6379

连接 172.16.104.56:6379节点，重新执行 set 命令后，写入完成。

172.16.104.56:6379> set user1 wdwedwedwed
OK 
172.16.104.56:6379> get user1
"wdwedwedwed"

3. Python 连接集群

需要执行 python3 -m pip install redis-py-cluster 安装连接 Redis 集群的模块，下图是一个 Demo。

from rediscluster import RedisCluster# 构建所有的节点
startup_nodes = [{"host": "172.16.104.56", "port": 6379},{"host": "172.16.104.56", "port": 6389},{"host": "172.16.104.56", "port": 6399},{"host": "172.16.104.57", "port": 6379},{"host": "172.16.104.57", "port": 6389},{"host": "172.16.104.57", "port": 6399}
]# 连接集群
redis_server = RedisCluster(startup_nodes=startup_nodes, decode_responses=True, password='Redis123')
# set
redis_server.set('user2', 'aaaaaaaa')
# get
print(redis_server.get('user2'))

4. Redis 集群维护

4.1 新增节点

当前集群拓扑是 3 节点双副本，接下来我们再为集群添加一个节点，变成 4 节点双副本。
首先，需要先准备好两台 Redis 实例，我们再通过修改配置文件，启动两台 Redis 实例。

[root@172-16-104-57 redis]# mkdir 6340
[root@172-16-104-57 redis]# ls
6340  6379  6389  6399

拷贝配置文件，修改 port、logfile、dir 三个参数。

cp redis_6379.conf redis_6340.conf

启动 Redis 数据库，然后再另外一个节点，重复该操作。两台新节点准备准备完成。

172.16.104.55:6379
172.16.104.55:6389

将两台新节点加入到集群中，组成 4 节点双副本。

redis-cli --cluster check 172.16.104.57:6379 -a 'Redis123'redis-cli -h 172.16.104.57 -p 6389 -a'Redis123' --cluster add-node 172.16.104.55:6379 172.16.104.55:6389

在这里插入图片描述

>>> Adding node 172.16.104.55:6379 to cluster 172.16.104.55:6389
>>> Performing Cluster Check (using node 172.16.104.55:6389)
M: 3a0d53c0ab6e2a0f6f53ea2036dc1fe33b58d9aa 172.16.104.55:6389slots: (0 slots) master
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[ERR] Not all 16384 slots are covered by nodes.

这里我看官方文档的，直接使用 add-node 命令就可以添加节点，在测试的时候发现报错 [ERR] Not all 16384 slots are covered by nodes 但是 check 节点的时候 slot 都已完成分配，没有查到解决的方法和原因，如果有人知道麻烦告诉我，谢谢。

由于使用 add-node 命令添加失败了，这里介绍另外一种方法，是可以添加成功的。

# 当前集群状态
172.16.104.57:6379 (603450ca...) -> 0 keys | 5460 slots | 1 slaves.
172.16.104.57:6389 (db174078...) -> 0 keys | 4370 slots | 1 slaves.
172.16.104.56:6379 (5be79052...) -> 0 keys | 6554 slots | 1 slaves.
[OK] 0 keys in 3 masters.
0.00 keys per slot on average.
>>> Performing Cluster Check (using node 172.16.104.57:6379)
M: 603450cae36e4d2f43b5ba98da52f1c35f87683e 172.16.104.57:6379slots:[0-1089],[1091-5460] (5460 slots) master1 additional replica(s)
M: db1740788ce051b82014a1d461a289ec669e59e7 172.16.104.57:6389slots:[1090],[5461-6553],[10923-13828],[16014-16383] (4370 slots) master1 additional replica(s)
M: 5be790525143f1a5ba8b697095d2233536bc7e70 172.16.104.56:6379slots:[6554-10922],[13829-16013] (6554 slots) master1 additional replica(s)
S: 8a960375d75e19299b712982a1c178a15b86bfc2 172.16.104.56:6399slots: (0 slots) slavereplicates 603450cae36e4d2f43b5ba98da52f1c35f87683e
S: ead3184f5323fc8f0f8ba6f42b122b10af058388 172.16.104.57:6399slots: (0 slots) slavereplicates 5be790525143f1a5ba8b697095d2233536bc7e70
S: d0fb82c46f800ac06bb2c8533fefa8141a1dcdd2 172.16.104.56:6389slots: (0 slots) slavereplicates db1740788ce051b82014a1d461a289ec669e59e7
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

连接到集群中的任意一个节点，执行如下命令，将新节点加入到集群中。

cluster meet 172.16.104.55 6379
cluster meet 172.16.104.55 6389

确认节点是否已经加入，可以看到两个新节点已经加入了，但是没有分配 slot 属于是孤立节点。

127.0.0.1:6379> cluster nodes
db1740788ce051b82014a1d461a289ec669e59e7 172.16.104.57:6389@16389 master - 0 1720164972000 10 connected 1090 5461-6553 10923-13828 16014-16383
603450cae36e4d2f43b5ba98da52f1c35f87683e 172.16.104.57:6379@16379 myself,master - 0 1720164971000 8 connected 0-1089 1091-5460
5be790525143f1a5ba8b697095d2233536bc7e70 172.16.104.56:6379@16379 master - 0 1720164971000 11 connected 6554-10922 13829-16013
3a0d53c0ab6e2a0f6f53ea2036dc1fe33b58d9aa 172.16.104.55:6389@16389 master - 0 1720164973000 9 connected
8a960375d75e19299b712982a1c178a15b86bfc2 172.16.104.56:6399@16399 slave 603450cae36e4d2f43b5ba98da52f1c35f87683e 0 1720164971000 8 connected
ead3184f5323fc8f0f8ba6f42b122b10af058388 172.16.104.57:6399@16399 slave 5be790525143f1a5ba8b697095d2233536bc7e70 0 1720164974656 11 connected
9d37453a597f2cc4d8d4d4f788c513a82ea89c59 172.16.104.55:6379@16379 master - 0 1720164973651 0 connected
d0fb82c46f800ac06bb2c8533fefa8141a1dcdd2 172.16.104.56:6389@16389 slave db1740788ce051b82014a1d461a289ec669e59e7 0 1720164972646 10 connected

4.2 手动分配 slot

使用 add-node 或者 meet 的方式将新节点加入集群，并没有分配 slot 需要手动分配。

9d37453a597f2cc4d8d4d4f788c513a82ea89c59 172.16.104.55:6379@16379 master - 0 1720164973651 0 connected
3a0d53c0ab6e2a0f6f53ea2036dc1fe33b58d9aa 172.16.104.55:6389@16389 master - 0 1720164973000 9 connected

接下来需要为其分配 slot 连接集群后，开始分配 slot 一共是 16384 个 slot 均分到 4 个节点，每份 4096 个 slot，需要从之前的 3 个节点中，每个节点分配一部分 slot 到新节点。

M: 603450cae36e4d2f43b5ba98da52f1c35f87683e 172.16.104.57:6379slots:[0-1089],[1091-5460] (5460 slots) master1 additional replica(s)
M: db1740788ce051b82014a1d461a289ec669e59e7 172.16.104.57:6389slots:[1090],[5461-6553],[10923-13828],[16014-16383] (4370 slots) master1 additional replica(s)
M: 5be790525143f1a5ba8b697095d2233536bc7e70 172.16.104.56:6379slots:[6554-10922],[13829-16013] (6554 slots) master1 additional replica(s)
M: 3a0d53c0ab6e2a0f6f53ea2036dc1fe33b58d9aa 172.16.104.55:6389slots: (0 slots) master

redis-cli --cluster reshard 172.16.104.57:6379 -a 'Redis123'

第一步，输入迁移多少个 slot。

How many slots do you want to move (from 1 to 16384)? 4096

第二步，输入迁移 slot 的目标节点的 ID。

What is the receiving node ID? 3a0d53c0ab6e2a0f6f53ea2036dc1fe33b58d9aa

第三步，选择从哪几个节点作为源端进行迁移，可以输入 all 表示从节点中均分，也可以指定节点 ID。

Please enter all the source node IDs.Type 'all' to use all the nodes as source nodes for the hash slots.Type 'done' once you entered all the source nodes IDs.
Source node #1: all

接下来就输入 yes 确认迁移即可，然后使用 check 命令检查一下。

redis-cli --cluster check 172.16.104.57:6379 -a 'Redis123'

172.16.104.57:6379 (603450ca...) -> 0 keys | 4096 slots | 1 slaves.
172.16.104.57:6389 (db174078...) -> 0 keys | 4078 slots | 1 slaves.
172.16.104.56:6379 (5be79052...) -> 0 keys | 4114 slots | 1 slaves.
172.16.104.55:6389 (3a0d53c0...) -> 0 keys | 4096 slots | 0 slaves.
172.16.104.55:6379 (9d37453a...) -> 0 keys | 0 slots | 0 slaves.
[OK] 0 keys in 5 masters.
0.00 keys per slot on average.
>>> Performing Cluster Check (using node 172.16.104.57:6379)
M: 603450cae36e4d2f43b5ba98da52f1c35f87683e 172.16.104.57:6379slots:[1365-5460] (4096 slots) master1 additional replica(s)
M: db1740788ce051b82014a1d461a289ec669e59e7 172.16.104.57:6389slots:[6552-6553],[8194-8993],[10923-13828],[16014-16383] (4078 slots) master1 additional replica(s)
M: 5be790525143f1a5ba8b697095d2233536bc7e70 172.16.104.56:6379slots:[8994-10922],[13829-16013] (4114 slots) master1 additional replica(s)
M: 3a0d53c0ab6e2a0f6f53ea2036dc1fe33b58d9aa 172.16.104.55:6389slots:[0-1364],[5461-6551],[6554-8193] (4096 slots) master
S: 8a960375d75e19299b712982a1c178a15b86bfc2 172.16.104.56:6399slots: (0 slots) slavereplicates 603450cae36e4d2f43b5ba98da52f1c35f87683e
S: ead3184f5323fc8f0f8ba6f42b122b10af058388 172.16.104.57:6399slots: (0 slots) slavereplicates 5be790525143f1a5ba8b697095d2233536bc7e70
M: 9d37453a597f2cc4d8d4d4f788c513a82ea89c59 172.16.104.55:6379slots: (0 slots) master
S: d0fb82c46f800ac06bb2c8533fefa8141a1dcdd2 172.16.104.56:6389slots: (0 slots) slavereplicates db1740788ce051b82014a1d461a289ec669e59e7
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

发现还有一个 172.16.104.55:6379 的节点，没有分配 slot 也没有作为一个备库，刚刚加入了两个节点，把 slot 分配给其中一个新主节点后，还需要手动将 172.16.104.55:6379 节点，指定为新主节点的备节点，最终组成 4 节点双副本。

连接到 172.16.104.55:6379 输入指令，节点 ID 填写的是刚才新分配 slot 的节点。

172.16.104.55:6379> cluster replicate 3a0d53c0ab6e2a0f6f53ea2036dc1fe33b58d9aa
OK
172.16.104.55:6379> cluster nodes
3a0d53c0ab6e2a0f6f53ea2036dc1fe33b58d9aa 172.16.104.55:6389@16389 master - 0 1720166382000 12 connected 0-1364 5461-6551 6554-8193
8a960375d75e19299b712982a1c178a15b86bfc2 172.16.104.56:6399@16399 slave 603450cae36e4d2f43b5ba98da52f1c35f87683e 0 1720166385000 8 connected
603450cae36e4d2f43b5ba98da52f1c35f87683e 172.16.104.57:6379@16379 master - 0 1720166385754 8 connected 1365-5460
9d37453a597f2cc4d8d4d4f788c513a82ea89c59 172.16.104.55:6379@16379 myself,slave 3a0d53c0ab6e2a0f6f53ea2036dc1fe33b58d9aa 0 1720166385000 12 connected
db1740788ce051b82014a1d461a289ec669e59e7 172.16.104.57:6389@16389 master - 0 1720166384749 13 connected 6552-6553 8194-8993 10923-13828 16014-16383
5be790525143f1a5ba8b697095d2233536bc7e70 172.16.104.56:6379@16379 master - 0 1720166383000 11 connected 8994-10922 13829-16013
ead3184f5323fc8f0f8ba6f42b122b10af058388 172.16.104.57:6399@16399 slave 5be790525143f1a5ba8b697095d2233536bc7e70 0 1720166382738 11 connected
d0fb82c46f800ac06bb2c8533fefa8141a1dcdd2 172.16.104.56:6389@16389 slave db1740788ce051b82014a1d461a289ec669e59e7 0 1720166386760 13 connected

4.3 节点移除

如果是从节点，可以直接使用下方命令移除：

redis-cli -a 'Redis123'  --cluster del-node 172.16.104.55:6379 9d37453a597f2cc4d8d4d4f788c513a82ea89c59# 输出
>>> Removing node 9d37453a597f2cc4d8d4d4f788c513a82ea89c59 from cluster 172.16.104.55:6379
>>> Sending CLUSTER FORGET messages to the cluster...
>>> Sending CLUSTER RESET SOFT to the deleted node.

如果要移除主节点，需要先将 slot 迁移到其他节点上：

redis-cli --cluster reshard 172.16.104.57:6379 -a 'Redis123'

在这里插入图片描述
接下来的步骤就和 4.2 迁移的步骤相同，将 172.16.104.55:6389 节点的 slot 打散分配给其他节点后，该节点的状态变为 slave。

ead3184f5323fc8f0f8ba6f42b122b10af058388 172.16.104.57:6399@16399 slave 5be790525143f1a5ba8b697095d2233536bc7e70 0 1720167846000 16 connected
3a0d53c0ab6e2a0f6f53ea2036dc1fe33b58d9aa 172.16.104.55:6389@16389 slave 5be790525143f1a5ba8b697095d2233536bc7e70 0 1720167848000 16 connected
5be790525143f1a5ba8b697095d2233536bc7e70 172.16.104.56:6379@16379 myself,master - 0 1720167847000 16 connected 6763-8193 8994-10922 13829-16013
db1740788ce051b82014a1d461a289ec669e59e7 172.16.104.57:6389@16389 master - 0 1720167847743 15 connected 5461-6762 8194-8993 10923-13828 16014-16383
8a960375d75e19299b712982a1c178a15b86bfc2 172.16.104.56:6399@16399 slave 603450cae36e4d2f43b5ba98da52f1c35f87683e 0 1720167848748 14 connected
603450cae36e4d2f43b5ba98da52f1c35f87683e 172.16.104.57:6379@16379 master - 0 1720167845000 14 connected 0-5460
d0fb82c46f800ac06bb2c8533fefa8141a1dcdd2 172.16.104.56:6389@16389 slave db1740788ce051b82014a1d461a289ec669e59e7 0 1720167849753 15 connected

使用命令移除节点：

[root@172-16-104-56 redis]# redis-cli -a 'Redis123'  --cluster del-node 172.16.104.55:6389 3a0d53c0ab6e2a0f6f53ea2036dc1fe33b58d9aa# 输出：
>>> Removing node 3a0d53c0ab6e2a0f6f53ea2036dc1fe33b58d9aa from cluster 172.16.104.55:6389
>>> Sending CLUSTER FORGET messages to the cluster...
>>> Sending CLUSTER RESET SOFT to the deleted node.

check 一下集群，已变成 3 节点双副本的状态。

172.16.104.57:6379 (603450ca...) -> 0 keys | 5461 slots | 1 slaves.
172.16.104.57:6389 (db174078...) -> 0 keys | 5378 slots | 1 slaves.
172.16.104.56:6379 (5be79052...) -> 0 keys | 5545 slots | 1 slaves.
[OK] 0 keys in 3 masters.
0.00 keys per slot on average.
>>> Performing Cluster Check (using node 172.16.104.57:6379)
M: 603450cae36e4d2f43b5ba98da52f1c35f87683e 172.16.104.57:6379slots:[0-5460] (5461 slots) master1 additional replica(s)
M: db1740788ce051b82014a1d461a289ec669e59e7 172.16.104.57:6389slots:[5461-6762],[8194-8993],[10923-13828],[16014-16383] (5378 slots) master1 additional replica(s)
M: 5be790525143f1a5ba8b697095d2233536bc7e70 172.16.104.56:6379slots:[6763-8193],[8994-10922],[13829-16013] (5545 slots) master1 additional replica(s)
S: 8a960375d75e19299b712982a1c178a15b86bfc2 172.16.104.56:6399slots: (0 slots) slavereplicates 603450cae36e4d2f43b5ba98da52f1c35f87683e
S: ead3184f5323fc8f0f8ba6f42b122b10af058388 172.16.104.57:6399slots: (0 slots) slavereplicates 5be790525143f1a5ba8b697095d2233536bc7e70
S: d0fb82c46f800ac06bb2c8533fefa8141a1dcdd2 172.16.104.56:6389slots: (0 slots) slavereplicates db1740788ce051b82014a1d461a289ec669e59e7
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

5. 集群运维

5.1 集群倾斜

集群倾斜是笔者维护 Redis 集群经常遇到的问题，无论是自建还是云 Redis 服务，集群倾斜指不同节点之间数据量和请求量出现明显差异，这种情况将加大负载均衡和开发运维的难度。本小节介绍集群倾斜的常见原因。

  1. 槽分配不均衡，如果槽分配不均衡，非常容易造成的数据量不均衡的问题，可以使用下方命令查看集群槽的分配情况。

    redis-cli --cluster check 172.16.104.57:6379 -a 'Redis123'

  2. 大 key 造成的，比如一个 list 或 hash 中存储了几十万个元素，造成单个 key 过大，集群数据量产生倾斜，可使用下方工具查看大 key。

    redis-cli --bigkeys -a 'Redis123'

  3. 不同的槽位对应的数据量较大，键通过CRC16哈希函数映射到槽上，正常情况下槽内键数量会相对均匀。但当大量使用hash_tag时，会产生不同的键映射到同一个槽的情况。在 key 名字上加一个 {} 在 crc16 计算的时候，只会使用 {} 中的内容。

    127.0.0.1:6379> set user:other{1} aaa
OK
127.0.0.1:6379> set user:other{1} aa
OK
127.0.0.1:6379> set user:age{1} aa
OK
127.0.0.1:6379> keys *
1) "user:age{1}"
2) "user:other{1}"
3) "user:info{1}"

  4. 内存相关配置不一致。内存相关配置指 hash-max-zip-list-value、set-max-intset-entries 等压缩数据结构配置。当集群大量使用hash、set 等数据结构时，如果内存压缩数据结构配置不一致，极端情况下会相差数倍的内存，从而造成节点内存量倾斜

云上一般不会出现第四种情况，大部分都是由于大 key 和 hash_tag 造成的。

5.2 手动切换

Redis Cluster 中的 master 节点都有一个 slave 节点，用于故障切换。Redis 还提供了手动切换的功能，可用于一些主节点迁移场景。只需要在对应的备节点执行 cluster failover 命令，就可以完成切换。

127.0.0.1:6389> cluster nodes
# 这里省去了其他节点的信息
d0fb82c46f800ac06bb2c8533fefa8141a1dcdd2 172.16.104.56:6389@16389 myself,slave db1740788ce051b82014a1d461a289ec669e59e7 0 1720511649000 15 connected
127.0.0.1:6389> cluster failover
OK
127.0.0.1:6389> cluster nodes
# 当前节点，已从 slave 变更为 master
d0fb82c46f800ac06bb2c8533fefa8141a1dcdd2 172.16.104.56:6389@16389 myself,master - 0 1720511671000 17 connected 5461-6762 8194-8993 10923-13828 16014-16383

相关文章：

  • 北京网站建设多少钱？
  • 辽宁网页制作哪家好_网站建设
  • 高端品牌网站建设_汉中网站制作
  • 宝兰德参编金融智能体标准，深耕大模型场景化落地
  • ubuntu防火墙指定端口开放设置
  • c#获取本机的MAC地址（附源码）
  • Python学习笔记36：进阶篇(二十五)pygame的使用之事件监听控制切歌和暂停，继续播放
  • 黑马程序员2024最新SpringCloud微服务开发与实战 个人学习心得、踩坑、与bug记录 Day4
  • STM32 IIC详解（软件模拟）
  • 【GameFramework扩展应用】6-1、接入热更新框架HybridCLR
  • 服务器，云、边缘计算概念简单理解
  • 爬虫管理解决方案：让数据收集变得高效且合规
  • Redis基础教程（十五）：Redis GEO地理信息查询与管理
  • 使用Apache Beam进行统一批处理与流处理
  • 【卡尔曼滤波器】DR_CAN ：1_递归算法_做估计 学习笔记
  • 人脸检测+调整分辨率+调整帧率
  • 【HBZ分享】如何规避TCP的洪水攻击
  • LangChain 入门案例教程
  • [ JavaScript ] 数据结构与算法 —— 链表
  • 5分钟即可掌握的前端高效利器：JavaScript 策略模式
  • 78. Subsets
  • Bytom交易说明（账户管理模式）
  • C++回声服务器_9-epoll边缘触发模式版本服务器
  • django开发-定时任务的使用
  • Github访问慢解决办法
  • mysql常用命令汇总
  • webpack+react项目初体验——记录我的webpack环境配置
  • 从零开始在ubuntu上搭建node开发环境
  • 前端面试题总结
  • 前端知识点整理（待续）
  • 区块链技术特点之去中心化特性
  • 如何正确配置 Ubuntu 14.04 服务器？
  • 扫描识别控件Dynamic Web TWAIN v12.2发布，改进SSL证书
  • 云大使推广中的常见热门问题
  • 转载：[译] 内容加速黑科技趣谈
  • 进程与线程（三）——进程/线程间通信
  • 如何用纯 CSS 创作一个菱形 loader 动画
  • ​iOS安全加固方法及实现
  • #stm32驱动外设模块总结w5500模块
  • #每日一题合集#牛客JZ23-JZ33
  • （C语言）fgets与fputs函数详解
  • (pojstep1.3.1)1017(构造法模拟)
  • (vue)el-checkbox 实现展示区分 label 和 value（展示值与选中获取值需不同）
  • （附源码）ssm基于web技术的医务志愿者管理系统 毕业设计 100910
  • （全部习题答案）研究生英语读写教程基础级教师用书PDF|| 研究生英语读写教程提高级教师用书PDF
  • （四）【Jmeter】 JMeter的界面布局与组件概述
  • (游戏设计草稿) 《外卖员模拟器》 (3D 科幻 角色扮演 开放世界 AI VR)
  • （转）PlayerPrefs在Windows下存到哪里去了？
  • .net core使用RPC方式进行高效的HTTP服务访问
  • .net framework 4.8 开发windows系统服务
  • .Net MVC + EF搭建学生管理系统
  • .net 使用$.ajax实现从前台调用后台方法(包含静态方法和非静态方法调用)
  • .NET和.COM和.CN域名区别
  • .NET技术成长路线架构图
  • .NET开源、简单、实用的数据库文档生成工具
  • @serverendpoint注解_SpringBoot 使用WebSocket打造在线聊天室（基于注解）
  • [2017][note]基于空间交叉相位调制的两个连续波在few layer铋Bi中的全光switch——
  • [2018/11/18] Java数据结构(2) 简单排序 冒泡排序 选择排序 插入排序