MMM 高可用
一、MMM 高可用概述
1、MMM(Master-Master replication manager for MySQL,MySQL主主复制管理器)
- 是一套支持双主故障切换和双主日常管理的脚本程序。MMM 使用 Perl 语言开发,主要用来监控和管理 MySQL Master-Master
- (双主)复制,虽然叫做双主复制,但是业务上同一时刻只允许对一个主进行写入,另一台备选主上提供部分读服务,以加速在主主切换时备选主的预热,可以说MMM这套脚本程序一方面实现了故障切换的功能,另一方面其内部附加的工具脚本也可以实现多个 Slave 的 read 负载均衡。
2、MMM 两种方式移除虚拟 IP
MMM提供了自动和手动两种方式移除一组服务器中复制延迟较高的服务器的虚拟ip,同时它还可以备份数据,实现两节点之间的数据同步等。由于MMM无法完全保证数据的一致性,所以MMM适用于对数据的一致性要求不是很高,但是又想最大程度地保证业务可用性的场景。
3、MMM 是什么
MMM是一套灵活的脚本程序,基于perl 实现,用来对 mysql replication 进行监控和故障迁移,并能管理 MySQL Master-Master 复制的配置。
4、关于 MMM 高可用架构的说明如下:
- mmm_mon:监控进程,负责所有的监控工作,决定和处理所有节点角色活动。此脚本需要在监控主机上运行。
- mmm_agent:运行在每个MySQL服务器上的代理进程,完成监控的探针工作和执行简单的远端服务设置。此脚本需要在被监管机上运行。
- mmm_control:一个简单的脚本,提供管理 mmm_mon 进程的命令。
- mysql-mmm 的监管端会提供多个虚拟 IP(VIP),包括一个可写 VIP,多个可读 VIP,通过监管的管理,这些 IP 会绑定在可用 MySQL 之上,当某一台 MySQL 宕机时,监管会将 VIP 迁移至其他 MySQL。
在整个监管过程中,需要在 MySQL 中添加相关授权用户,以便让 MySQL 可以支持监控主机的维护。 授权的用户包括一个 mmm_monitor 用户和一个 mmm_agent 用户。
实验:搭建 Mysql MMM
环境准备:
Shell脚本一键部署-----源码编译安装MySQL数据库
主机 | 操作系统 | IP地址 | 软件/工具 |
master01(db1) | Centos 7.4 | 20.0.0.5 |
mysql5.7、mysql-mmm |
master02(db2) | Centos 7.4 | 20.0.0.6 |
mysql5.7、mysql-mmm |
slave01(db3) | Centos 7.4 | 20.0.0.7 |
mysql5.7、mysql-mmm |
slave02(db4) | Centos 7.4 | 20.0.0.8 |
mysql5.7、mysql-mmm |
monitor | Centos 7.4 | 20.0.0.9 | mysql-mmm |
实验详细步骤:
二、搭建 MySQL 多主多从模式
1、Master01、Master02、Slave1、Slave2 四台服务器上安装 mysql 5.7 并关闭防火墙
systemctl stop firewalld setenforce 0
2、修改 master01 配置文件
vim /etc/my.cnf ...... [mysqld] user = mysql basedir = /usr/local/mysql datadir = /usr/local/mysql/data port = 3306 character_set_server=utf8 pid-file = /usr/local/mysql/mysqld.pid socket = /usr/local/mysql/mysql.sock server-id = 1 #每台 Mysql 主机的 server-id 不能相同 log-error=/usr/local/mysql/data/mysql_error.log #错误日志 general_log=ON #通用查询日志 general_log_file=/usr/local/mysql/data/mysql_general.log slow_query_log=ON #慢查询日志 slow_query_log_file=mysql_slow_query.log long_query_time=5 binlog-ignore-db=mysql,information_schema #不需要同步的库名 log_bin=mysql_bin #开启二进制日志用于主从数据复制 log_slave_updates=true #允许slave从master复制数据时可以写入到自己的二进制日志 sync_binlog=1 #"双1设置",MySQL 在每写一次二进制日志时都会同步到磁盘中去 innodb_flush_log_at_trx_commit=1 #"双1设置",每次事务提交时MySQL都会把缓存的数据写入日志文件,并且刷到磁盘中去 auto_increment_increment=2 #自增字段一次递增多少 auto_increment_offset=1 #自增字段的起始值
3、把配置文件复制到其它 3 台数据库服务器上并启动服务器,注意:配置文件中的 server_id 要修改
scp /etc/my.cnf root@20.0.0.6:/etc/ scp /etc/my.cnf root@20.0.0.7:/etc/ scp /etc/my.cnf root@20.0.0.8:/etc/
(1)修改server_id 四台服务器id不能出现重复
vim /etc/my.cnf server_id = 1 #master01(db1) /centos 7-5 server_id = 2 #master02(db2) /centos 7-6 server_id = 3 #slave01(db3) /centos 7-7 server_id = 4 #slave02(db4) /centos 7-8
(2)重启 mysql 服务,四台都要重启
systemctl restart mysqld
3、配置主主复制,两台主服务器相互复制 (#在两台主服务器上都执行授予从的权限,从服务器上不需要执行)
grant replication slave on *.* to 'replication'@'20.0.0.%' identified by '123456'
#在两台主服务器上(master01(db1)、master02(db2))都执行授予从的权限,从服务器上不需要执行
show master status; #在两台主服务器上查看,记录日志文件名称和同步点
4、配置同步
(1)在 master01 上配置同步
change master to master_host='20.0.0.6',master_user='replication',master_password='123456',master_log_file='mysql_bin.000001',master_log_pos=456;
start slave; #开启同步
show slave status\G #查看状态
(2)在 master02 上配置同步
change master to master_host='20.0.0.5',master_user='replication',master_password='123456',master_log_file='mysql_bin.000001',master_log_pos=456;
start slave;
show slave status\G
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
5、配置主从复制,在2台从服务器上做相同操作,对接 master01
change master to master_host='20.0.0.5',master_user='replication',master_password='123456',master_log_file='mysql_bin.000001',master_log_pos=456; start slave; show slave status\G Slave_IO_Running: Yes Slave_SQL_Running: Yes
6、测试主主、主从 同步情况
create database db_test; #创建数据库 db_test
show databases;
三、安装配置 MySQL-MMM
1、在所有服务器(5台)上安装 MySQL-MMM
cd /etc/yum.repos.d/ ls mv repo.bak/* ./ yes wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo
#若之前做了本地源的话,需要把里面在线源的文件移出来再安装 yum -y install epel-release yum -y install mysql-mmm*
2、在 master01 上对 MySQL-MMM 进行配置
cd /etc/mysql-mmm/ vim mmm_common.conf …… <host default> cluster_interface ens33 …… replication_user replication replication_password 123456 agent_user mmm_agent agent_password 123456 <host db1> ip 192.168.80.20 mode master peer db2 </host> <host db2> ip 192.168.80.30 mode master peer db1 </host> <host db3> ip 192.168.80.13 mode slave </host> <host db4> ip 192.168.80.14 mode slave </host> <role writer> hosts db1, db2 ips 192.168.80.188 mode exclusive #只有一个 host 可以进行写操作模式 </role> <role reader> hosts db3, db4 ips 192.168.80.198, 192.168.80.199 mode balanced #多个 slave 主机可以进行读操作模式 </role>
2、把配置文件复制到其它 4 台主机,所有主机该配置文件内容都是一样的
scp mmm_common.conf root@20.0.0.6:/etc/mysql-mmm/ scp mmm_common.conf root@20.0.0.7:/etc/mysql-mmm/ scp mmm_common.conf root@20.0.0.8:/etc/mysql-mmm/ scp mmm_common.conf root@20.0.0.9:/etc/mysql-mmm/
3、修改所有数据库服务器的代理配置文件 mmm_agent.conf
vim /etc/mysql-mmm/mmm_agent.conf include mmm_common.conf this db1 #根据不同的主机分别修改为 db1,db2,db3,db4
4、在 monitor 监控服务器上修改监控配置文件 mmm_mon.conf
vim /etc/mysql-mmm/mmm_mon.conf include mmm_common.conf <monitor> ..... ping_ips 20.0.0.5,20.0.0.6,20.0.0.7,20.0.0.8 #指定所有数据库服务器的 IP auto_set_online 10 #指定自动上线时间 </monitor> <host default> monitor_user mmm_monitor #指定 mmm_monitor 的用户名 monitor_password 123456 #指定 mmm_monitor 的密码 </host>
5、在所有数据库上为 mmm_agent(代理进程)授权
grant super, replication client, process on *.* to 'mmm_agent'@'20.0.0.%' identified by '123456';
6、在所有数据库上为 mmm_moniter(监控进程)授权
grant replication client on *.* to 'mmm_monitor'@'20.0.0.%' identified by '123456'; flush privileges;
7、在所有数据库服务器上启动 mysql-mmm-agent
systemctl start mysql-mmm-agent.service
systemctl enable mysql-mmm-agent.service
8、在 monitor 服务器上启动 mysql-mmm-monitor
systemctl start mysql-mmm-monitor.service
四、在 monitor 服务器上测试群集
1、查看各节点的情况
mmm_control show db1(20.0.0.5) master/ONLINE. Roles: writer(20.0.0.188) db2(20.0.0.6) master/ONLINE. Roles: db3(20.0.0.7) slave/ONLINE. Roles: reader(20.0.0.198) db4(20.0.0.8) slave/ONLINE. Roles: reader(20.0.0.199)
2、检测监控功能是否都完善,需要各种OK
mmm_control checks all
3、指定绑定 VIP 的主机
mmm_control move_role writer db2
五、故障测试
1、停止 master01主的服务
停止 master01 确认 VIP 是否移动到 master02 上。注意:master01 主服务器恢复服务后,不会抢占
mmm_control move_role writer db1 #写入移回 db1 systemctl stop mysqld #停止 db1 的服务 mmm_control show #查看状态 db2(20.0.0.6) master/ONLINE. Roles: writer(20.0.0.188) #vip 自动漂移到 db
systemctl start mysqld # db1 恢复服务 mmm_control show #查看状态 db2(20.0.0.6) master/ONLINE. Roles: writer(20.0.0.188) #db1 不会抢占 vip,vip 仍在 db2 上
2、停止一台从服务器,另一台将接管两个虚拟IP,以保证业务不停止
systemctl stop mysqld #停止 db3 从服务器的服务 mmm_control show #另一台从服务器 db4 将接管两个虚拟IP db4(20.0.0.8) slave/ONLINE. Roles: reader(20.0.0.198), reader(20.0.0.199)
systemctl start mysqld #从服务器 db3 恢复服务 mmm_control show #vip又回到原来的 db3上 db3(20.0.0.7) slave/ONLINE. Roles: reader(20.0.0.198) db4(20.0.0.8) slave/ONLINE. Roles: reader(20.0.0.199)
六、客户端测试
1、在 master01 服务器上为 monitor 服务器地址授权登录
grant all on *.* to 'yyds'@'20.0.0.%' identified by '123456'; #设置个用户名为yyds,密码123456,权限为all flush privileges; #刷新
2、在 monitor 服务器上使用 VIP 登录
yum install -y mariadb-server mariadb
systemctl start mariadb.service
mysql -uyyds -p -h 20.0.0.188
3、创建数据,测试同步情况
create database XXX; #创建数据库XXX