redis的主从复制、哨兵、集群
#修改监听地址
#关闭访问保护
#检查端口号
#设置后台启动
#修改pid文件地址,添加日志文件地址
#修改持久化文件地址
#启用AOF持久化类型
重启主节点
配置重启从节点
在master节点上验证从节点:
在master节点上创建一个新键
在slave节点上查看是否同步
从节点可以查看到,说明主从复制配置成功。
哨兵的作用
监控:哨兵会不断地检查主节点和从节点是否运作正常。
自动故障转移:当主节点不能正常工作时,哨兵会开始自动故障转移操作,它会将失效主节点的其中一个从节点升级为新的主节点,并让其它从节点改为复制新的主节点。
通知(提醒):哨兵可以将故障转移的结果发送给客户端。
哨兵结构由两部分组成,哨兵节点和数据节点:
-
哨兵节点:哨兵系统由一个或多个哨兵节点组成,哨兵节点是特殊的redis节点,不存储数据。
-
数据节点:主节点和从节点都是数据节点。
哨兵故障转移的机制:
1.由哨兵节点定期监控发现主节点是否出现了故障 每个哨兵节点每隔1秒会向主节点、从节点及其它哨兵节点发送一次ping命令做一次心跳检测。如果主节点在一定时间范围内不回复或者是回复一个错误消息,那么这个哨兵就会认为这个主节点主观下线了(单方面的)。当超过半数哨兵节点认为该主节点主观下线了,这样就客观下线了。
3.由leader哨兵节点执行故障转移,过程如下:
- 将某一个从节点升级为新的主节点,让其它从节点指向新的主节点;
- 若原主节点恢复也变成从节点,并指向新的主节点;
- 通知客户端主节点已经更换。
需要特别注意的是,客观下线是主节点才有的概念;如果从节点和哨兵节点发生故障,被哨兵主观下线后,不会再有后续的客观下线和故障转移操作。
主节点的选举:
- 过滤掉不健康的(已下线的),没有回复哨兵 ping 响应的从节点。
- 选择配置文件中从节点优先级配置最高的。(replica-priority,默认值为100)
- 选择复制偏移量最大,也就是复制最完整的从节点。
搭建redis哨兵模式:
所有节点修改Redis 的sentinel配置文件
#关闭保护模式
#redis哨兵默认监听端口:26379
#指定sentinel为后台启动
#指定pid地址,指定日志文件存放路径
#指定数据库存放路径
#指定哨兵节点监控192.168.116.6:6379 这个主节点
#最后的2与主节点的故障判定有关;表示最少需要两个哨兵节点同意才能判定主节点故障并进行故障转移
#判定服务器down掉的时间周期,默认是30000毫秒
#同一个sentinel对同一个master两次failover之间的间隔时间180秒
#启动哨兵模式
#查看哨兵信息
#查看redis-server进程号
#将主节点的redis-server进程杀死
#再查看哨兵的信息,发现主节点地址切换到了从节点上,从节点成为新的master
作用:
(1)数据分区:数据分区(或称数据分片)是集群最核心的功能。 集群将数据分散到多个节点,一方面突破了Redis单机内存大小的限制,存储容量大大增加;另一方面每个主节点都可以对外提供读服务和写服务,大大提高了集群的响应能力。 Redis单机内存大小受限问题,在介绍持久化和主从复制时都有提及;例如,如果单机内存太大,bgsave和bgrewriteaof的fork操作可能导致主进程阻塞,主从环境下主机切换时可能导致从节点长时间无法提供服务,全量复制阶段主节点的复制缓冲区可能溢出。
(2)高可用:集群支持主从复制和主节点的自动故障转移(与哨兵类似);当任一节点发生故障时,集群仍然可以对外提供服务。
Redis集群的数据分片:
Redis集群引入了哈希槽的概念 Redis集群有16384个哈希槽(编号0-16383) 集群的每组节点负责一部分哈希槽 每个Key通过CRC16校验后对16384取余来决定放置哪个哈希槽,通过这个值,去找到对应的插槽所对应的节点,然后直接自动跳转到这个对应的节点上进行存取操作
redis的集群一般需要6个节点,3主3从。方便起见,这里所有节点在同一台服务器上模拟:
以端口号进行区分:3个主节点端口号:6001/6002/6003,对应的从节点端口号:6004/6005/6006。
#查看redis进程
#启动集群
#查看节点的哈希槽标号范围
#创建一个新建,并查看他的槽编号
#对应的slave节点上也有了这条数据。
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· DeepSeek 开源周回顾「GitHub 热点速览」
· 物流快递公司核心技术能力-地址解析分单基础技术分享
· .NET 10首个预览版发布:重大改进与新特性概览!
· AI与.NET技术实操系列(二):开始使用ML.NET
· .NET10 - 预览版1新功能体验(一)