MHA部署
参考：http://www.cnblogs.com/gomysql/p/3675429.html
1.在所有节点安装MHA node所需的perl模块（DBD:mysql）：
yum install perl-DBD-MySQL -y
2.在所有的节点安装mha node：
wget http://mysql-master-ha.googlecode.com/files/mha4mysql-node-0.53.tar.gz
(http://ftp.debian.org/debian/pool/main/m/mha4mysql-node/mha4mysql-node_0.54.orig.tar.gz)
tar xf mha4mysql-node-0.53.tar.gz cd mha4mysql-node-0.53 perl Makefile.PL make && make install
执行 perl Makefile.PL 时报错： Can't locate CPAN.pm in @INC
这是没有安装perl-CPAN造成的，解决方法： yum -y install perl-CPAN
安装完成后会在/usr/local/bin目录下生成以下脚本文件：
apply_diff_relay_logs 识别差异的中继日志事件并将其差异的事件应用于其他的slave filter_mysqlbinlog 去除不必要的ROLLBACK事件（MHA已不再使用这个工具） purge_relay_logs 清除中继日志（不会阻塞SQL线程） save_binary_logs 保存和复制master的二进制日志
3.安装MHA Manager
MHA Manager中主要包括了几个管理员的命令行工具，例如master_manger，master_master_switch等。MHA Manger也依赖于perl模块，具体如下：
- 安装MHA Node软件包之前需要安装依赖。这里使用yum完成，没有epel源的可以使用上面提到的脚本（epel源安装也简单）。注意：在MHA Manager的主机也是需要安装MHA Node。
yum install perl-DBD-MySQL perl-Config-Tiny perl-Log-Dispatch perl-Parallel-ForkManager perl-Time-HiRes -y wget http://ftp.debian.org/debian/pool/main/m/mha4mysql-manager/mha4mysql-manager_0.55.orig.tar.gz tar zxvf mha4mysql-manager_0.55.orig.tar.gz cd mha4mysql-manager-0.55 perl Makefile.PL make && make install
- 安装完成后会在/usr/local/bin目录下面生成以下脚本
apply_diff_relay_logs 识别差异的中继日志事件并将其差异的事件应用于其他的slave filter_mysqlbinlog 去除不必要的ROLLBACK事件（MHA已不再使用这个工具） masterha_check_ssh 检查MHA的SSH配置状况 masterha_check_repl 检查MySQL复制状况 masterha_manger 启动MHA masterha_check_status 检测当前MHA运行状态 masterha_master_monitor 检测master是否宕机 masterha_master_switch 控制故障转移（自动或者手动） masterha_conf_host 添加或删除配置的server信息 purge_relay_logs 清除中继日志（不会阻塞SQL线程） save_binary_logs 保存和复制master的二进制日志
- 可选步骤，拷贝相关脚本。这些脚本不完整，需要自己修改，如果开启下面的任何一个脚本对应的参数，而对应这里的脚本又没有修改，则会抛错：
cp ./samples/scripts/* /usr/local/bin/
4.配置SSH登录无密码验证
5.搭建主从复制环境
注意：binlog-do-db 和 replicate-ignore-db 设置必须相同。 MHA 在启动时候会检测过滤规则，如果过滤规则不同，MHA 不启动监控和故障转移。
- 备份主库
-
mysqldump -uroot -p --master-data=2 -A > /data/all.sql - 在主库创建复制用户
grant replication slave on *.* to 'my-slave'@'%' identified by '123456'; flush privileges;
- 定位binlog
head -n 30 all.sql | grep 'CHANGE MASTER TO'
- 将all.sql导入备机
- 开启备份
CHANGE MASTER TO MASTER_HOST='*.*.*.*',MASTER_USER='my-slave', MASTER_PASSWORD='123456',MASTER_LOG_FILE='mysql-bin.000010',MASTER_LOG_POS=112; start slave;
- 手动设置read-only
mysql -uroot -p -e 'set global read_only=1'
- 添加监控账户
grant all on *.* to 'root'@'%' IDENTIFIED by '123456' flush privileges
6.配置MHA
- 拷贝配置文件
-
mkdir -p /etc/masterha cp mha4mysql-manager-0.55/samples/conf/app1.cnf /etc/masterha/
- 修改配置文件/etc/masterha/app1.cnf，将注释删掉
-
[server default] manager_workdir=/var/log/masterha //设置manager的工作目录 manager_log=/var/log/masterha/app1/manager.log //设置manager的日志 master_binlog_dir=/data/mysql //设置master 保存binlog的位置，以便MHA可以找到master的日志，我这里的也就是mysql的数据目录 master_ip_failover_script= /usr/local/bin/master_ip_failover //设置自动failover时候的切换脚本 master_ip_online_change_script= /usr/local/bin/master_ip_online_change //设置手动切换时候的切换脚本 password=123456 //设置mysql中root用户的密码，这个密码是前文中创建监控用户的那个密码 user=root 设置监控用户root ping_interval=1 //设置监控主库，发送ping包的时间间隔，默认是3秒，尝试三次没有回应的时候自动进行railover remote_workdir=/tmp //设置远端mysql在发生切换时binlog的保存位置 repl_password=123456 //设置复制用户的密码 repl_user=repl //设置复制环境中的复制用户名 report_script=/usr/local/send_report //设置发生切换后发送的报警的脚本 secondary_check_script= /usr/local/bin/masterha_secondary_check -s server03 -s server02 shutdown_script="" //设置故障发生后关闭故障主机脚本（该脚本的主要作用是关闭主机放在发生脑裂,这里没有使用） ssh_user=root //设置ssh的登录用户名 [server1] hostname=192.168.0.50 port=3306 [server2] hostname=192.168.0.60 port=3306 candidate_master=1 //设置为候选master，如果设置该参数以后，发生主从切换以后将会将此从库提升为主库，即使这个主库不是集群中事件最新的slave check_repl_delay=0 //默认情况下如果一个slave落后master 100M的relay logs的话，MHA将不会选择该slave作为一个新的master，因为对于这个slave的恢复需要花费很长时间，通过设置check_repl_delay=0,MHA触发切换在选择一个新的master的时候将会忽略复制延时，这个参数对于设置了candidate_master=1的主机非常有用，因为这个候选主在切换的过程中一定是新的master [server3] hostname=192.168.0.70 port=3306
- 注：这里有个坑，就是secondary_check_script，完全不知道这个脚本干嘛的，然后还报错说不认识server03和server02，改成server3和server2也没用，索性将它注释了，一切太平
- 在每个slave节点上设置relay log的清除方式
mysql -uroot -p -e 'set global relay_log_purge=0'
- 创建purge_relay_log.sh脚本
#!/bin/bash user=root passwd=123456 port=3306 log_dir='/data/masterha/log' work_dir='/data' purge='/usr/local/bin/purge_relay_logs' if [ ! -d $log_dir ] then mkdir $log_dir -p fi $purge --user=$user --password=$passwd --disable_relay_log_purge --port=$port --workdir=$work_dir >> $log_dir/purge_relay_logs.log 2>&1
- crontab里添加
0 4 * * * /bin/bash /root/purge_relay_log.sh
7.检查SSH配置
masterha_check_ssh --conf=/etc/masterha/app1.cnf
8.检查复制状况(确保主库没有slave信息,否则会报错)
需注释掉 master_ip_failover_script= /usr/local/bin/master_ip_failover ,等到编辑了master_ip_failover脚本以后再开启
masterha_check_repl --conf=/etc/masterha/app1.cnf
如果报mysqlbinlong version not found
ln -s {mysql_home}/bin/mysqlbinlog /usr/local/bin/mysqlbinlog ln -s {mysql_home}/bin/mysql /usr/local/bin/mysql
我这边还报了个unknown variable 'default-character-set=utf8mb4',解决方法:修改my.cnf
#default-character-set=utf8mb4
loose-default-character-set=utf8mb4
9.开启MHA Manager监控
nohup masterha_manager --conf=/etc/masterha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/masterha/app1/manager.log 2>&1 &
启动参数介绍：
--remove_dead_master_conf 该参数代表当发生主从切换后，老的主库的ip将会从配置文件中移除。
--manger_log 日志存放位置
--ignore_last_failover 在缺省情况下，如果MHA检测到连续发生宕机，且两次宕机间隔不足8小时的话，则不会进行Failover，之所以这样限制是为了避免ping-pong效应。该参数代表忽略上次MHA触发切换产生的文件，默认情况下，MHA发生切换后会在日志目录，也就是上面我设置的/data产生app1.failover.complete文件，下次再次切换的时候如果发现该目录下存在该文件将不允许触发切换，除非在第一次切换后收到删除该文件，为了方便，这里设置为--ignore_last_failover。
关闭命令: masterha_stop --conf=/etc/masterha/app1.cnf
10.检查MHA Manager的状态
masterha_check_status --conf=/etc/masterha/app1.cnf
华丽的分割线,做到这就不做了,因为用不了VIP.......
11.配置虚拟ip
- 安装keepalived(主库,备选主库)
wget http://www.keepalived.org/software/keepalived-1.2.12.tar.gz tar zxvf keepalived-1.2.12.tar.gz cd keepalived-1.2.12 ./configure --prefix=/usr/local/keepalived make && make install
mkdir /etc/keepalived
cp /usr/local/keepalived/etc/rc.d/init.d/keepalived /etc/init.d/
cp /usr/local/keepalived/etc/sysconfig/keepalived /etc/sysconfig/
cp /usr/local/keepalived/etc/keepalived/keepalived.conf /etc/keepalived/
cp /usr/local/keepalived/sbin/keepalived /usr/sbin/ - 在主库上配置keepalived
global_defs { notification_email { saltstack@163.com } notification_email_from dba@dbserver.com smtp_server 127.0.0.1 smtp_connect_timeout 30 router_id MySQL-HA } vrrp_instance VI_1 { state BACKUP interface eth1 virtual_router_id 51 priority 150 advert_int 1 nopreempt authentication { auth_type PASS auth_pass 1111 } virtual_ipaddress { 192.168.0.88 } }
- 在备选主库上配置keepalived
global_defs { notification_email { saltstack@163.com } notification_email_from dba@dbserver.com smtp_server 127.0.0.1 smtp_connect_timeout 30 router_id MySQL-HA } vrrp_instance VI_1 { state BACKUP interface eth1 virtual_router_id 51 priority 120 advert_int 1 nopreempt authentication { auth_type PASS auth_pass 1111 } virtual_ipaddress { 192.168.0.88 } } - 启动keepalive
service keepalived start
-
MHA引入keepalived
#!/usr/bin/env perl use strict; use warnings FATAL => 'all'; use Getopt::Long; my ( $command, $ssh_user, $orig_master_host, $orig_master_ip, $orig_master_port, $new_master_host, $new_master_ip, $new_master_port ); my $vip = '192.168.0.88'; my $ssh_start_vip = "service keepalived start"; my $ssh_stop_vip = "service keepalived stop"; GetOptions( 'command=s' => \$command, 'ssh_user=s' => \$ssh_user, 'orig_master_host=s' => \$orig_master_host, 'orig_master_ip=s' => \$orig_master_ip, 'orig_master_port=i' => \$orig_master_port, 'new_master_host=s' => \$new_master_host, 'new_master_ip=s' => \$new_master_ip, 'new_master_port=i' => \$new_master_port, ); exit &main(); sub main { print "\n\nIN SCRIPT TEST====$ssh_stop_vip==$ssh_start_vip===\n\n"; if ( $command eq "stop" || $command eq "stopssh" ) { my $exit_code = 1; eval { print "Disabling the VIP on old master: $orig_master_host \n"; &stop_vip(); $exit_code = 0; }; if ($@) { warn "Got Error: $@\n"; exit $exit_code; } exit $exit_code; } elsif ( $command eq "start" ) { my $exit_code = 10; eval { print "Enabling the VIP - $vip on the new master - $new_master_host \n"; &start_vip(); $exit_code = 0; }; if ($@) { warn $@; exit $exit_code; } exit $exit_code; } elsif ( $command eq "status" ) { print "Checking the Status of the script.. OK \n"; #`ssh $ssh_user\@cluster1 \" $ssh_start_vip \"`; exit 0; } else { &usage(); exit 1; } } # A simple system call that enable the VIP on the new master sub start_vip() { `ssh $ssh_user\@$new_master_host \" $ssh_start_vip \"`; } # A simple system call that disable the VIP on the old_master sub stop_vip() { return 0 unless ($ssh_user); `ssh $ssh_user\@$orig_master_host \" $ssh_stop_vip \"`; } sub usage { print "Usage: master_ip_failover --command=start|stop|stopssh|status --orig_master_host=host --orig_master_ip=ip --orig_master_port=port --new_master_host=host --new_master_ip=ip --new_master_port=port\n"; }
- 再次检查集群状态
masterha_check_repl --conf=/etc/masterha/app1.cnf
