一、mysql主从复制介绍

mysql的主从复制并不是数据库磁盘上的文件直接拷贝,而是通过逻辑的binlog日志复制到要同步的服务器本地,
然后由本地的线程读取日志里面的sql语句,重新应用到mysql数据库中。

mysql数据库支持单向,双向,链式级联,环状等不同业务场景的复制,一台服务器充当主服务器master,接收来自用户的更新,
而一个或多个其他服务器充当从服务器slave,接收来自主服务器binlog文件的日志内容,解析出sql,更新到从服务器。

一主一从 (A -> B, A为主,B为从)
一主多从 (A -> B, A -> C, A为主,B与C为从)
双主双向同步 (A -> B , B -> A , A与B同为主,互相备份)
线性级联 (A -> B -> C , A与B主主互备,C为从)
环状级联 (A -> B -> C -> A, A、B、C都为主,各节点都可写入数据)

二、实现mysql主从读写分离的方案

1、通过程序实现读写分离(判断语句关键字,去连接主从数据库)
2、通过开源的软件实现读写分离(mysql-proxy,amoeba,稳定性和功能一般,不建议生产使用)
3、独立开发DAL层软件

三、mysql主从复制原理介绍
mysql主从复制是一个异步的复制过程,将一个主库复制到一个从库,master与slave之间实现整个过程是由三个线程参与完成。
其中sql线程与I/O线程在slave端,另一个I/O线程在master端。

复制原理过程

1、在slave上执行start slave命令,开启主从复制开关,开始进行主从复制。
2、slave的I/O线程通过master上已经授权的复制用户请求master,请求指定binlog日志的指定位置。
3、master接收slave的I/O线程的请求后,其自身负责复制的I/O线程会根据slave的请求信息分批读取指定binlog日志的指定位置之后的日志信息,
然后返回给slave的I/O线程,返回信息除了binlog日志外,还有master的新binlog文件名称,以及新binlog中的下一个指定更新位置。
4、slave获取来自master上I/O线程发送的binlog日志内容,日志文件及位置点后,会将binlog内容依次写到slave自身的relay log(中继日志)文件尾部,
并将新的binlog文件名和位置记录到master-info文件中,以便下次从master读取新binlog日志时,能告诉master从新binlog的新位置读取。
5、slave的sql线程会实时检测本地relay log中I/O线程新增加的日志内容,及时把relay log文件中的内容解析成sql语句,并按解析sql语句的位置顺序执行这些sql语句。
relay-log.info中记录当前应用中继日志的文件名及位置点。

 
四、mysql主从复制操作
我这里是mysql单机多实例,3306、3308、3309
主库为3306,从库为3308,3309

(1)、在master主库上
    1、设置server-id值并开启binlog功能

    > vi /etc/my.cnf

    [mysqld]
    #用于同步的每台机器server-id都不能相同

    server-id = 10
    log-bin = /data/mysql56/data/mysql-bin

    2、重启主库

    > service mysqld restart

    3、登陆主库,查看server-id

    > mysql -uroot -p
    > show variables like 'server_id';

    4、主库上建立用于从库复制的账号

    > grant replication slave on *.* to "rep"@"%" identified by "123456";
    > flush privileges;
    > select user,host from mysql.user;
    > show grants for rep@"%";

    5、对主库数据库锁表只读(当前窗口不要关掉)

    > flush table with read lock;

    查看主库状态

    > show master status;

    6、备份主库所有数据文件

    > mysqldump -uroot -p -A -B | gzip > /data/mysql_bak.$(date +%F).sql.gz

    7、备份完主库数据后,解锁

    > unlock tables;

    8、把主库导出的数据迁移到从库

(2)、在slave从库上
    1、设置server-id值并关闭binlog功能

    有两种情况下需打开binlog
    级联同步A->B->C中间的B,就要开启binlog
    在从库做数据库备份,必须要有全备和binlog日志才是完整备份。

    > vi /mysql-instance/3308/my.cnf
    [mysqld]
    server-id = 11
    relay-log = /mysql-instance/3308/relay-bin
    relay-log-info-file = /mysql-instance/3308/relay-log.info

    2、重启从库

    > /mysql-instance/3308/mysql restart

    3、登陆从库检查参数

    > mysql -uroot -p -S /mysql-instance/3308/mysql.sock
    > show variables like 'log_bin';
    > show variables like 'server_id';

    4、把主库mysqldump导出的数据恢复到从库

    > gzip -d /data/mysql_bak.2017-01-15.sql.gz

    把主库数据还原到从库

    > mysql -uroot -p -S /mysql-instance/3308/mysql.sock < /data/mysql_bak.2017-01-15.sql

    5、登录从库,配置复制参数

    CHANGE MASTER TO
    MASTER_HOST='127.0.0.1',
    MASTER_PORT=3306,
    MASTER_USER='rep',
    MASTER_PASSWORD='123456',
    MASTER_LOG_FILE='mysql-bin.000001',
    MASTER_LOG_POS=396;

    注意上面的MASTER_LOG_FILE和MASTER_LOG_POS是在主库中用show master status;查看的信息。

    查看master.info文件

    > cat /mysql-instance/3308/data/master.info

    6、启动从库同步开关,测试主从复制情况

    > mysql -uroot -p -S /mysql-instance/3308/mysql.sock -e "start slave;"
    > mysql -uroot -p -S /mysql-instance/3308/mysql.sock -e "show slave status\G;"
    > mysql -uroot -p -S /mysql-instance/3308/mysql.sock -e "show slave status\G" | egrep "IO_Running|SQL_Running|_Behind_Master"

    7、测试主从复制

    > mysql -uroot -p -e "create database wohehe;"
    > mysql -uroot -p -S /mysql-instance/3308/mysql.sock -e "show databases;"

 
五、mysql主从复制线程状态说明及用途
1、主库线程的同步状态

> show processlist\G;
*************************** 1. row ***************************
     Id: 5
   User: rep
   Host: localhost:47605
     db: NULL
Command: Binlog Dump
   Time: 4728
  State: Master has sent all binlog to slave; waiting for binlog to be updated
   Info: NULL

说明主库线程已从binlog读取更新,发送到了从库,线程处理空闲状态,等待binlog的事件更新。

2、从库线程的同频状态

> show processlist\G;
*************************** 2. row ***************************
     Id: 6
   User: system user
   Host:
     db: NULL
Command: Connect
   Time: 5305
  State: Slave has read all relay log; waiting for the slave I/O thread to update it
   Info: NULL

说明从库已读取所有中继日志,等待从库I/O线程的更新。

六、主从复制故障
如果我在从库上创建了一个库,然后去主库创建同名的库,那么这就会冲突了。

> show slave status;
Slave_IO_Running: Yes
Slave_SQL_Running: No
Seconds_Behind_Master: NULL
Last_Error: Error 'Can't create database 'xxxxx'; database exists' on query. Default database: 'xxxxx'. Query: 'create database xxxxx'

对于该冲突解决方法
方法一

> stop slave;
#将同步指针移动下一个,如果多次不同步,可重复操作
> set global sql_slave_skip_counter = 1;
> start slave;

方法二

> vi /mysql-instance/3308/my.cnf
#把可以忽略的错误号事先在配置文件中配置
slave-skip-errors = 1002,1007,1032

 

posted on 2017-02-01 19:58  怀素真  阅读(2513)  评论(4编辑  收藏  举报