mysql+centos7+主从复制
MYSQL(mariadb)
MariaDB数据库管理系统是MySQL的一个分支,主要由开源社区在维护,采用GPL授权许可。
开发这个分支的原因之一是:甲骨文公司收购了MySQL后,有将MySQL闭源的潜在风险,因此社区采用分支的方式来避开这个风险。
MariaDB的目的是完全兼容MySQL,包括API和命令行,使之能轻松成为MySQL的代替品。
yum安装mariadb
第一种方式: 通过阿里云的yum源去下载(第三方的yum源,可能会版本较低, 且软件不全, 可能找不到)
yum install mariadb-server mariadb-client
mariadb-server x86_64 1:5.5.64-1.el7 base 11 M
为依赖而安装:
mariadb x86_64 1:5.5.64-1.el7 base 8.7 M
perl-Compress-Raw-Bzip2 x86_64 2.061-3.el7 base 32 k
perl-Compress-Raw-Zlib x86_64 1:2.061-4.el7 base 57 k
perl-DBD-MySQL x86_64 4.023-6.el7 base 140 k
perl-DBI x86_64 1.627-4.el7 base 802 k
perl-IO-Compress noarch 2.061-2.el7 base 260 k
perl-Net-Daemon noarch 0.48-5.el7 base 51 k
perl-PlRPC noarch 0.2020-14.el7 base 36 k
为依赖而更新:
mariadb-libs x86_64 1:5.5.64-1.el7 base 759 k
第二种方式: 通过mariadb的官方yum源去下载(一定是这个软件最正确的yum源, 且包都是最新的 )
yum install mariadb-server mariadb-client
MariaDB-server x86_64 10.1.41-1.el7.centos mariadb 24 M
MariaDB-shared x86_64 10.1.41-1.el7.centos mariadb 621 k
替换 mariadb-libs.x86_64 1:5.5.60-1.el7_5
为依赖而安装:
MariaDB-client x86_64 10.1.41-1.el7.centos mariadb 10 M
MariaDB-common x86_64 10.1.41-1.el7.centos mariadb 68 k
boost-program-options x86_64 1.53.0-27.el7 base 156 k
galera x86_64 25.3.26-1.rhel7.el7.centos mariadb 8.1 M
jemalloc x86_64 3.6.0-1.el7 epel 105 k
lsof x86_64 4.87-6.el7 base 331 k
perl-Compress-Raw-Bzip2 x86_64 2.061-3.el7 base 32 k
perl-Compress-Raw-Zlib x86_64 1:2.061-4.el7 base 57 k
perl-DBI x86_64 1.627-4.el7 base 802 k
perl-Data-Dumper x86_64 2.145-3.el7 base 47 k
perl-IO-Compress noarch 2.061-2.el7 base 260 k
perl-Net-Daemon noarch 0.48-5.el7 base 51 k
perl-PlRPC noarch 0.2020-14.el7 base 36 k
rsync x86_64 3.1.2-6.el7_6.1 base 404 k
>>> 这里用第二种方式安装
第一步:添加 MariaDB yum 仓库
1、首先在 RHEL/CentOS 和 Fedora 操作系统中添加 MariaDB 的 YUM 配置文件 MariaDB.repo 文件。
#编辑创建mariadb.repo仓库文件
vi /etc/yum.repos.d/MariaDB.repo
2、添加repo仓库配置
[mariadb]
name = MariaDB
baseurl = http://yum.mariadb.org/10.1/centos7-amd64
gpgkey=https://yum.mariadb.org/RPM-GPG-KEY-MariaDB
gpgcheck=1
第二步:在 CentOS 7 中安装 MariaDB
2、当 MariaDB 仓库地址添加好后,你可以通过下面的一行命令轻松安装 MariaDB。
yum install MariaDB-server MariaDB-client -y
第三步:启动mariadb
systemctl start mariadb
启动mariadb相关命令
systemctl start mariadb //启动MariaDB
systemctl stop mariadb //停止MariaDB
systemctl restart mariadb //重启MariaDB
systemctl enable mariadb //设置开机启动
配置mariadb
第一步:初始化mysql
在确认 MariaDB 数据库软件程序安装完毕并成功启动后请不要立即使用。为了确保数据 库的安全性和正常运转,需要先对数据库程序进行初始化操作。这个初始化操作涉及下面 5 个 步骤。
➢ 设置 root 管理员在数据库中的密码值(注意,该密码并非 root 管理员在系统中的密 码,这里的密码值默认应该为空,可直接按回车键)。
➢ 设置 root 管理员在数据库中的专有密码。
➢ 随后删除匿名账户,并使用 root 管理员从远程登录数据库,以确保数据库上运行的业
务的安全性。
➢ 删除默认的测试数据库,取消测试数据库的一系列访问权限。
➢ 刷新授权列表,让初始化的设定立即生效。
确保mariadb服务器启动后,执行命令初始化
mysql_secure_installation
初始化mysql
mysql基本命令
# 修改mysql本机登录密码, 远程登录密码由授权的时候进行设置
MariaDB [(none)]> set password=PASSWORD('123');
生产环境里不会死磕root用户,为了数据库的安全以及和其他用户协同管理数据库,就需要创建其他数据库账户,然后分配权限,满足工作需求
MariaDB [(none)]> create user lyy@'127.0.0.1' identified by 'lyy123';
MariaDB [(none)]> select host,user,password from mysql.user where user='lyy';
+-----------+------+-------------------------------------------+
| host | user | password |
+-----------+------+-------------------------------------------+
| 127.0.0.1 | lyy | *8AF80463619D73FA535AAD754F8AF8250B5ED824 |
+-----------+------+-------------------------------------------+
切换普通用户lyy,查看数据库信息,发现无法看到完整的数据库列表
$ mysql -ulyy -plyy123 -h 127.0.0.1
MariaDB [(none)]> show databases;
+--------------------+
| Database |
+--------------------+
| information_schema |
+--------------------+
一般来说没有这么麻烦, 直接在配置权限时候设置某个用户名, 该用户名会被自动创建 |
第二步:配置mariadb远程登录
mysql使用grant命令对账户进行授权,grant命令常见格式如下
grant 权限 on 数据库.表名 to 账户@主机名 identified by '密码'; 对特定数据库中的特定表授权
grant 权限 on 数据库.* to 账户@主机名 identified by '密码'; 对特定数据库中的所有表给与授权
grant 权限1,权限2,权限3 on *.* to 账户@主机名 identified by '密码'; 对所有库中的所有表给与多个授权
grant all privileges on *.* to 账户@主机名 identified by '密码'; 对所有库和所有表授权所有权限
退出数据库,使用root登录,开始权限设置
$ mysql -uroot -p123
MariaDB [(none)]> use mysql;
>>> 配置mariadb远程登录, 可以通过windows, pycharm等客户端进行连接, 在远端登录的话, 就必须输入123这个密码
MariaDB [mysql]> grant all privileges on *.* to lxx@"%" identified by '123';
MariaDB [mysql]> flush privileges;
查看权限
MariaDB [mysql]> select * from mysql.user where user='lxx'\G;
设置防火墙规则
$ netstat -antlp |grep mysql
tcp6 0 0 :::3306 :::* LISTEN 8169/mysqld
$ ll /etc/firewalld/zones/
总用量 8
-rw-r--r--. 1 root root 315 10月 1 15:36 public.xml
-rw-r--r--. 1 root root 315 10月 1 15:36 public.xml.old
$ firewall-cmd --zone=public --permanent --add-port=3306/tcp
success
$ firewall-cmd --list-all
public (active)
target: default
icmp-block-inversion: no
interfaces: eth0
sources:
services: ssh dhcpv6-client
ports: 3306/tcp
protocols:
masquerade: no
forward-ports:
source-ports:
icmp-blocks:
rich rules:
远程登录数据库
$ mysql -ulxx -h '172.16.240.10'
mysql>
第三步:配置mariadb中文编码
编辑mysql配置文件/etc/my.cnf
[mysqld]
character-set-server=utf8
collation-server=utf8_general_ci
log-error=/var/log/mysqld.log
[client]
default-character-set=utf8
[mysql]
default-character-set=utf8
查看编码
show variables like '%char%';
或者 \s
MariaDB [(none)]> show variables like '%char%';
+--------------------------+----------------------------+
| Variable_name | Value |
+--------------------------+----------------------------+
| character_set_client | utf8 |
| character_set_connection | utf8 |
| character_set_database | utf8 |
| character_set_filesystem | binary |
| character_set_results | utf8 |
| character_set_server | utf8 |
| character_set_system | utf8 |
| character_sets_dir | /usr/share/mysql/charsets/ |
+--------------------------+----------------------------+
MariaDB [(none)]> \s
--------------
mysql Ver 15.1 Distrib 10.1.41-MariaDB, for Linux (x86_64) using readline 5.1
Connection id: 2
Current database:
Current user: root@localhost
SSL: Not in use
Current pager: stdout
Using outfile: ''
Using delimiter: ;
Server: MariaDB
Server version: 10.1.41-MariaDB MariaDB Server
Protocol version: 10
Connection: Localhost via UNIX socket
Server characterset: utf8
Db characterset: utf8
Client characterset: utf8
Conn. characterset: utf8
UNIX socket: /var/lib/mysql/mysql.sock
Uptime: 2 min 50 sec
Threads: 1 Questions: 5 Slow queries: 0 Opens: 17 Flush tables: 1 Open tables: 11 Queries per second avg: 0.029
--------------
验证是否配置成功
MariaDB [(none)]> create database s16;
>>> 查看数据库创建的编码
MariaDB [(none)]> show create database s16;
+----------+--------------------------------------------------------------+
| Database | Create Database |
+----------+--------------------------------------------------------------+
| s16 | CREATE DATABASE `s16` /*!40100 DEFAULT CHARACTER SET utf8 */ |
+----------+--------------------------------------------------------------+
>>> 切换到数据库s16
MariaDB [(none)]> use s16;
>>> 在数据库s16创建表test
MariaDB [s16]> create table test ( id int primary key auto_increment, name varchar(128) );
>>> 查看表test的表结构
MariaDB [s16]> show create table test\G;
*************************** 1. row ***************************
Table: test
Create Table: CREATE TABLE `test` (
`id` int(11) NOT NULL AUTO_INCREMENT,
`name` varchar(128) DEFAULT NULL,
PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8
MariaDB [s16]> desc test;
+-------+--------------+------+-----+---------+----------------+
| Field | Type | Null | Key | Default | Extra |
+-------+--------------+------+-----+---------+----------------+
| id | int(11) | NO | PRI | NULL | auto_increment |
| name | varchar(128) | YES | | NULL | |
+-------+--------------+------+-----+---------+----------------+
>>> 在表test中插入中文字段
MariaDB [s16]> insert into test (name) values ('水货身份证丢了');
MariaDB [s16]> insert into test (name) values ('国庆快乐');
MariaDB [s16]> select * from test;
+----+-----------------------+
| id | name |
+----+-----------------------+
| 1 | 水货身份证丢了 |
| 2 | 国庆快乐 |
+----+-----------------------+
报错
http://mirrors.aliyun.com/centos/%24releasever/os/x86_64/repodata/repomd.xml: [Errno 14] HTTP Error 404 - Not Found
解决方案:
打开 /etc/yum.repos.d/CentOS7-Base.repo, 将$releasever全改为7
$ sed -i 's#$releasever#7#g' /etc/yum.repos.d/CentOS-Base.repo
数据库备份与恢复
mysqldump命令用于备份数据库数据
>>>> 通过客户端备份
$ mysqldump -ulxx -p -h '172.16.240.10' --all-databases > /tmp/db.dump
Enter password:
$ du -shx /tmp/db.dump
516K /tmp/db.dump
删除某个数据库并还原
mysql> drop database mysql;
>>>> 还原数据
>>>> 第一种方式, linux命令通过mysql命令
$ mysql -uroot -p < /tmp/db.dump
>>>> 第二种方式, 在mysql命令行中输入source命令
MariaDB [(none)]> source /tmp/db.dump;
骚操作
删除了数据库mysql后, mariadb服务器重启服务无法重启
$ systemctl restart mariadb
Job for mariadb.service failed because the control process exited with error code. See "systemctl status mariadb.service" and "journalctl -xe" for details.
删除/var/lib/mysql
目录下所有文件, 再次重启mariadb
恢复初始化
这种方法只适用于5.5.64-MariaDB MariaDB Server, 通过阿里云第三方安装的yum源
$ rm -rf /var/lib/mysql/*
$ systemctl restart mariadb
MYSQL主从复制
MySQL数据库的主从复制方案,是其自带的功能,并且主从复制并不是复制磁盘上的数据库文件,而是通过binlog日志复制到需要同步的从服务器上。
MySQL数据库支持单向、双向、链式级联,等不同业务场景的复制。在复制的过程中,一台服务器充当主服务器(Master),接收来自用户的内容更新(读写操作),而一个或多个其他的服务器充当从服务器(slave),接收来自Master上binlog文件的日志内容,解析出SQL,重新更新到Slave,使得主从服务器数据达到一致。
主从复制的逻辑有以下几种:
一主一从,单向主从同步模式,只能在Master端写入数据
一主多从
双主主复制逻辑架构,此架构可以在Master1或Master2进行数据写入,或者两端同时写入(特殊设置)
在生产环境中,MySQL主从复制都是异步的复制方式,即不是严格的实时复制,但是给用户的体验都是实时的。
MySQL主从复制集群功能使得MySQL数据库支持大规模高并发读写成为可能,且有效的保护了服务器宕机的数据备份
应用场景
利用复制功能当Master服务器出现问题时,我们可以人工的切换到从服务器继续提供服务,此时服务器的数据和宕机时的数据几乎完全一致。
复制功能也可用作数据备份,但是如果人为的执行drop,delete等语句删除,那么从库的备份功能也就失效了.
主从机制实现原理
(1) master将改变记录到二进制日志(binary log)中(这些记录叫做二进制日志事件,binary log events);
(2) slave将master的binary log events拷贝到它的中继日志(relay log);
(3) slave重做中继日志中的事件,将改变反映它自己的数据。
mysql主从复制的步骤:
第一步: master主库配置
>>> 查看数据库状态
systemctl status mariadb
>>> 停mariadb
systemctl stop mariadb
>>> 修改配置文件
vim /etc/my.cnf
[mysqld]
server-id=1
log-bin=mysql-bin
-------> 解释:server-id服务的唯一标识(主从之间都必须不同);log-bin启动二进制日志名称为mysql-bin
>>> 重启mariadb
systemctl start mariadb
>>> 检查主库的状态, 查看binlong文件
MariaDB [(none)]> show master status;
+------------------+----------+--------------+------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+------------------+----------+--------------+------------------+
| mysql-bin.000001 | 313 | | |
+------------------+----------+--------------+------------------+
第二步: master主库添加从库账号
1.给从库账号授权,说明给chaoge从库复制的权限,在172.16.240.10机器上复制
MariaDB [(none)]> grant replication slave on *.* to 'lyy'@'%' identified by '123';
--------> 如果提示密码太简单不复合策略加在前面加这句
MariaDB [(none)]> set global validate_password_policy=0;
2.检查主库创建的复制账号
MariaDB [(none)]> select user,host from mysql.user;
3.检查授权账号的权限
MariaDB [(none)]> show grants for lyy@'172.16.240.10';
4. 实现对主数据库锁表只读,防止数据写入,数据复制失败
MariaDB [(none)]> flush table with read lock;
5.检查主库的状态
MariaDB [(none)]> show master status;
+------------------+----------+--------------+------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+------------------+----------+--------------+------------------+
| mysql-bin.000001 | 483319 | | |
+------------------+----------+--------------+------------------+
File是二进制日志文件名,Position 是日志开始的位置。后面从库会用到 后面从库会用到 后面从库会用到!!!!!!
6.锁表后,一定要单独再打开一个SSH窗口,导出数据库的所有数据,
$ mysqldump -uroot -p --all-databases > /data/all.sql
7.确保数据导出后,没有数据插入,完毕再查看主库状态
show master status;
8.导出数据完毕后,解锁主库,恢复可写;
unlock tables;
9.将备份导出的数据scp至Slave数据库
scp /data/all.sql root@172.16.240.10:/data/
第三步: slave从库配置
1.设置server-id值并关闭binlog功能参数(配置文件里面不开启默认就是关闭的)
数据库的server-id在主从复制体系内是唯一的,Slave的server-id要与主库和其他从库不同,并且log-bin参数是没有的
MariaDB [(none)]> show variables like 'log_bin';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| log_bin | OFF |
+---------------+-------+
2.因此修改Slave的/etc/my.cnf,写入
$ vim /etc/my.cnf
[mysqld]
server-id=3
3.重启数据库
$ systemctl restart mariadb
4.检查Slava从数据库的各项参数
MariaDB [(none)]> show variables like 'log_bin';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| log_bin | OFF |
+---------------+-------+
MariaDB [(none)]> show variables like 'server_id';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| server_id | 3 |
+---------------+-------+
5.恢复主库Master的数据导入到Slave库
导入数据(注意sql文件的路径)
MariaDB [(none)]> source /data/all.sql;
6.配置复制的参数,Slave从库连接Master主库的配置
MariaDB [(none)]> change master to master_host='172.16.240.10',
master_user='yy',
master_password='123',
master_log_file='mysql-bin.000001',
master_log_pos=482944;
7.启动从库的同步开关,测试主从复制的情况
MariaDB [(none)]> start slave;
8.查看复制状态
MariaDB [(none)]> show slave status\G;
Slave_IO_State: Waiting for master to send event
Master_Host: 172.16.240.10
Master_User: yy
Master_Port: 3306
Connect_Retry: 60
Master_Log_File: mysql-bin.000001
Read_Master_Log_Pos: 483319
Relay_Log_File: slave-relay-bin.000002
Relay_Log_Pos: 912
Relay_Master_Log_File: mysql-bin.000001
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
检查主从复制是否成功
在主库进行写操作, 观察从库是否是同步更新的