06 主从复制原理与优化

一. 什么是主从复制

1. 介绍

# 主从复制可以解决的问题? 
机器故障;容量瓶颈;QPS瓶颈

# 主从的搭建形式:
一主一从,一主多从

# 主从复制的作用: 
1. 做读写分离
2. 做数据副本
3. 扩展数据性能

# 主从关系
1. 一个master可以有多个slave
2. 一个slave只能有一个master
3. 数据流向是单向的,从master到slave

2. 原理

1. 副本库通过 slaveof 127.0.0.1 6379 命令,连接主库,并发送SYNC给主库 
2. 主库收到SYNC,会立即触发BGSAVE, 后台保存RDB, 发送给副本库
3. 副本库接收后会应用RDB快照
4. 主库会陆续将中间产生的新的操作, 保存并发送给副本库
5. 到此, 我们主复制集就正常工作了
6. 再此以后, 主库只要发生新的操作, 都会以命令传播的形式自动发送给副本库.
7. 所有复制相关信息, 从info信息中都可以查到.即使重启任何节点, 他的主从关系依然都在.
8. 如果发生主从关系断开时, 从库数据没有任何损坏, 在下次重连之后, 从库发送PSYNC给主库
9. 主库只会将从库缺失部分的数据同步给从库应用, 达到快速恢复主从的目的

3. 主库是否要开启持久化?

如果不开只要主库一重启,造成所有主从数据丢失!

4. 辅助配置(主从数据一致性配置)

# 从服务器的数量少于1个, 并且三个从服务器的延迟(lag)值都大于或等于3秒时,主服务器将拒绝执行写命令
min-slaves-to-write 1
min-slaves-max-lag 3

二. 复制的 配置

1. slave 命令

# 异步搭建从库, 进而连接6379端口的主库
slaveof 127.0.0.1 6379 

# 取消主从的复制关系,之前的数据不会清除
slaveof no one         

2. 配置文件

# 配置从节点ip和端口
slaveof ip port 

# 从节点只读,因为可读可写,数据会乱
slave-read-only yes 


slaveof 127.0.0.1 6379
slave-read-only yes 

四. 复制常见问题

# 读写分离: 读流量分摊到从节点可能遇到的问题
1. 复制数据延迟
2. 读到过期数据
3. 从节点故障

# 主从配置不一致
1. maxmemory不一致:丢失数据
2. 数据结构优化参数:主节点做了优化,从节点没有设置优化,会出现一些问题

# 规避全量复制
1. 第一次全量复制,不可避免:小主节点,低峰(夜间)
2. 节点运行id不匹配:主节点重启(运行id变化)
3. 复制挤压缓冲区不足:增大复制缓冲区大小,rel_backlog_size

# 规避复制风暴
单主节点复制风暴,主节点重启,所有从节点复制
posted @ 2020-09-05 23:08  给你加马桶唱疏通  阅读(90)  评论(0编辑  收藏  举报