1. 错误日志
错误日志是MySQL中最重要的日志之一,它记录了当mysql启动和停止时,以及服务器在运行过程中发生任何严重错误时的相关信息。当数据库出现任何故障导致无法正常使用时,建议首先查看此日志。
该日志是默认开启的,默认放在目录/var/log/
,默认的日志文件名为mysqld.log
。查看日志位置:
mysql> show variables like '%log_error%';
+----------------------------+----------------------------------------+
| Variable_name | Value |
+----------------------------+----------------------------------------+
| binlog_error_action | ABORT_SERVER |
| log_error | /var/log/mysqld.log |
| log_error_services | log_filter_internal; log_sink_internal |
| log_error_suppression_list | |
| log_error_verbosity | 2 |
+----------------------------+----------------------------------------+
5 rows in set (0.01 sec)
2. 二进制日志
- 介绍
二进制日志(binlog)记录了所有的DDL(数据定义语言)语句和DML(数据操纵语言)语句,但不包括数据查询(SELECT、SHOW)语句。
作用:
①.灾难时的数据恢复;
②.MySQL的主从复制。在MySQL8版本中,默认二进制日志时开启的,涉及到的参数如下:
mysql> show variables like '%log_bin%';
+---------------------------------+-----------------------------+
| Variable_name | Value |
+---------------------------------+-----------------------------+
| log_bin | ON |
| log_bin_basename | /var/lib/mysql/binlog |
| log_bin_index | /var/lib/mysql/binlog.index |
| log_bin_trust_function_creators | OFF |
| log_bin_use_v1_row_events | OFF |
| sql_log_bin | ON |
+---------------------------------+-----------------------------+
6 rows in set (0.00 sec)
/var/lib/mysql
目录如下:
[root@localhost pmish]# ll /var/lib/mysql/
总用量 194600
-rw-r-----. 1 mysql mysql 56 1月 12 13:50 auto.cnf
-rw-r-----. 1 mysql mysql 4813034 3月 30 16:14 binlog.000003
-rw-r-----. 1 mysql mysql 157 3月 31 11:14 binlog.000004
-rw-r-----. 1 mysql mysql 157 3月 31 11:14 binlog.000005
-rw-r-----. 1 mysql mysql 48 3月 31 11:14 binlog.index
-rw-------. 1 mysql mysql 1676 1月 12 13:50 ca-key.pem
-rw-r--r--. 1 mysql mysql 1112 1月 12 13:50 ca.pem
-rw-r--r--. 1 mysql mysql 1112 1月 12 13:50 client-cert.pem
-rw-------. 1 mysql mysql 1680 1月 12 13:50 client-key.pem
-rw-r-----. 1 mysql mysql 196608 3月 31 11:16 #ib_16384_0.dblwr
-rw-r-----. 1 mysql mysql 8585216 1月 12 13:50 #ib_16384_1.dblwr
-rw-r-----. 1 mysql mysql 3848 1月 12 14:30 ib_buffer_pool
-rw-r-----. 1 mysql mysql 12582912 3月 31 11:14 ibdata1
-rw-r-----. 1 mysql mysql 50331648 3月 31 11:16 ib_logfile0
-rw-r-----. 1 mysql mysql 50331648 1月 12 13:50 ib_logfile1
-rw-r-----. 1 mysql mysql 12582912 3月 31 11:14 ibtmp1
drwxr-x---. 2 mysql mysql 187 3月 31 11:14 #innodb_temp
drwxr-x---. 2 mysql mysql 4096 3月 17 17:52 lbfs
drwxr-x---. 2 mysql mysql 143 1月 12 13:50 mysql
-rw-r-----. 1 mysql mysql 26214400 3月 31 11:14 mysql.ibd
srwxrwxrwx. 1 mysql mysql 0 3月 31 11:14 mysql.sock
-rw-------. 1 mysql mysql 5 3月 31 11:14 mysql.sock.lock
drwxr-x---. 2 mysql mysql 8192 1月 12 13:50 performance_schema
-rw-------. 1 mysql mysql 1676 1月 12 13:50 private_key.pem
-rw-r--r--. 1 mysql mysql 452 1月 12 13:50 public_key.pem
-rw-r--r--. 1 mysql mysql 1112 1月 12 13:50 server-cert.pem
-rw-------. 1 mysql mysql 1680 1月 12 13:50 server-key.pem
drwxr-x---. 2 mysql mysql 28 1月 12 13:50 sys
-rw-r-----. 1 mysql mysql 16777216 3月 31 11:16 undo_001
-rw-r-----. 1 mysql mysql 16777216 3月 31 11:16 undo_002
MySQL的二进制日志可以说是MySQL最重要的日志了,它记录了所有的DDL和DML(除了数据查询语句)语句,以事件形式记录,还包含语句所执行的消耗的时间,MySQL的二进制日志是事务安全型的。一般来说开启二进制日志大概会有1%的性能损耗(参见MySQL官方中文手册 5.1.24版)。因此二进制日志有两个最重要的使用场景:
其一:MySQL Replication在Master
端开启binlog,Mster把它的二进制日志传递给slaves
来达到master-slave主从数据一致的目的。
其二:自然就是数据恢复了,通过使用mysqlbinlog
工具来使恢复数据。
二进制日志包括两类文件:二进制日志索引文件(文件名后缀为.index)用于记录所有的二进制文件,二进制日志文件(文件名后缀为.00000*)记录数据库所有的DDL和DML(除了数据查询语句)语句事件。
业内目前推荐使用的是row
模式,准确性高,虽然说文件大,但是现在有SSD和万兆光纤网络,这些磁盘IO和网络IO都是可以接受的。
- binlog日志开启
mysql的binlog这么有用我们怎么开启呢?
一. linux下:
- 修改my.cnf文件
# 在linux中可以通过命令查找文件位置
[root@localhost pmish]# find / -name my.cnf
/etc/my.cnf
- 在[mysqld]后面增加如下配置
server_id=2
log_bin=mysql-bin
binlog_format=ROW
- 3:重启服务并验证
systemctl restart mysqld
mysql -uroot -p
mysql> show variables like '%log_bin%';
+---------------------------------+-----------------------------+
| Variable_name | Value |
+---------------------------------+-----------------------------+
| log_bin | ON |
| log_bin_basename | /var/lib/mysql/binlog |
| log_bin_index | /var/lib/mysql/binlog.index |
| log_bin_trust_function_creators | OFF |
| log_bin_use_v1_row_events | OFF |
| sql_log_bin | ON |
+---------------------------------+-----------------------------+
6 rows in set (0.00 sec)
#log_bin是ON说明开启了
二. windows版本(mysqsl 5.7)
1:修改mysql的配置文件my.ini
my.ini位于C:\ProgramData\MySQL\MySQL Server 5.7。该文件默认不允许修改,需要右键取得所有权之后才能保存修改。
在[mysqld]下添加以下参数:
log-bin=mysql-bin
binlog_format=Row
2:重启mysql验证
- binlog日志查看
- 在mysql中查看
mysql> show binlog events; #只查看第一个binlog文件的内容
mysql> show binlog events ``in 'mysql-bin.000002'``;#查看指定binlog文件的内容
mysql> show binary logs; #获取binlog文件列表
mysql> show master status; #查看当前正在写入的binlog文件
可以在navicat等可视化工具中执行
- 通过二进制日志查询工具
mysqlbinlog
来查看
mysqlbinlog
是一个查看mysql二进制日志的工具,可以把mysql上面的所有操作记录从日志里导出,这个工具默认的安装路径为:/usr/local/mysql/bin/mysqlbinlog
可以通过find / -name "mysqlbinlog"命令查找mysqlbinlog的工具路径。
mysqlbinlog
具体语法:
mysqlbinlog [参数选择] logfilename
参数选项:
-d 指定数据库名称,只列出指定的数据库相关操作。
-o 忽略掉日志中的前n行命令。
-v 将行事件(数据变更)重构为SQL语句。
-vv 将行事件(数据变更)重构为SQL语句,并输出注释信息
示例:
[root@localhost pmish]# mysqlbinlog -d lbfs /var/lib/mysql/binlog.000003
BINLOG '
2O0gZBMBAAAATgAAAFRwSQAAAGQAAAAAAAEABGxiZnMACmRjaXJfcXVlcnkACAgPCAgPDw8PCvwD
/AP8A/wD/AP+AQEAAgP8/wDuM6f9
2O0gZB4BAAAAdwAAAMtwSQAAAGQAAAAAAAEAAgAI/wjsrwAAAAAAABIAMjAyMzAzMjcwODQxNDlf
MTE4K6SDIIcBAAAIADFfMV84XzQyAwAxMjMCADQyGgDphY3mlrnlkI3np7AyMDIzMDMyNzA4NDE1
MGEpBl4=
'/*!*/;
### INSERT INTO `lbfs`.`dcir_query`
### SET
### @1=45036 /* LONGINT meta=0 nullable=0 is_null=0 */
### @2='20230327084149_118' /* VARSTRING(1020) meta=1020 nullable=1 is_null=0 */
### @3=1679877710891 /* LONGINT meta=0 nullable=1 is_null=0 */
### @4=NULL /* LONGINT meta=0 nullable=1 is_null=1 */
### @5='1_1_8_42' /* VARSTRING(1020) meta=1020 nullable=1 is_null=0 */
### @6='123' /* VARSTRING(1020) meta=1020 nullable=1 is_null=0 */
### @7='42' /* VARSTRING(1020) meta=1020 nullable=1 is_null=0 */
### @8='配方名称20230327084150' /* VARSTRING(1020) meta=1020 nullable=1 is_null=0 */
# at 4813003
#230327 9:14:00 server id 1 end_log_pos 4813034 CRC32 0xaad8b8c1 Xid = 19538
COMMIT/*!*/;
SET @@SESSION.GTID_NEXT= 'AUTOMATIC' /* added by mysqlbinlog */ /*!*/;
DELIMITER ;
# End of log file
/*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;
- binlog日志删除
三种常见命令:
设置日志自动过期:
在mysql的配置文件中配置二进制日志的过期时间,设置了之后,二进制日志过期会自动删除。
- 查看过期时间
mysql> show variables like '%binlog_expire_logs_seconds%';
+----------------------------+---------+
| Variable_name | Value |
+----------------------------+---------+
| binlog_expire_logs_seconds | 2592000 |
+----------------------------+---------+
1 row in set (0.00 sec)
- 修改过期时间
1.临时生效
# 查看默认设置的过期时间
show variables like "%expire_logs%";
# 设置保留15天
set global expire_logs_days=15
# 刷新日志
flush logs;
#查看新生成的binlog日志
show master status\G:
注意:以上命令在数据库执行会立即生效,请确定设置数据的保留日期,以免误删
2.永久生效
# 修改配置文件
vim /etc/my.cnf
[mysqld]模块
expire_logs_days=15
注意:在配置文件修改后,需要重启才能永久生效。另,0表示永不过期,单位是天
3. 查询日志
查询日志中记录了客户端的所有操作语句,而二进制日志不包含查询数据的SQL 语句。默认情况下,查询日志事未开启的。如果要开启查询日志,可以设置以下配置:
mysql> show variables like '%general%';
+------------------+------------------------------+
| Variable_name | Value |
+------------------+------------------------------+
| general_log | OFF |
| general_log_file | /var/lib/mysql/localhost.log |
+------------------+------------------------------+
2 rows in set (0.00 sec)
# 修改MySQL的配置文件 /etc/my.cnf文件,添加如下内容:
general_log=1
该选项用来开启查询日志,可选值:0或者1;0代表关闭,1代表开启
#设置日志的文件名,如果没有指定,默认的文件名为host_name.log
general_log_file=mysql_query.log
4. 慢查询日志
慢查询日志记录了所有执行时间超过参数long_query_time设置值并且扫描记录数不小于min_examined_row_limit的所有的SQL语句的日志,默认未开启。long_query_time默认为10秒,最小为0,精度可以到微妙。
- 查看是否开启以及文件位置
mysql> show variables like '%slow%';
+-----------------------------+-----------------------------------+
| Variable_name | Value |
+-----------------------------+-----------------------------------+
| log_slow_admin_statements | OFF |
| log_slow_extra | OFF |
| log_slow_replica_statements | OFF |
| log_slow_slave_statements | OFF |
| slow_launch_time | 2 |
| slow_query_log | OFF |
| slow_query_log_file | /var/lib/mysql/localhost-slow.log |
+-----------------------------+-----------------------------------+
7 rows in set (0.00 sec)
慢查询日志:修改/etc/my.cnf
slow_query_log=1
执行时间参数
long_query_time=2
默认情况下,不会记录管理语句,也不会记录不使用索引进行查找的查询。可以使用log_show_admin_statements和更改行为log_queries_not_using_indexes,如下所述
记录执行较慢的管理语句
log_slow_admin_statements=1
记录执行较慢的未使用索引的语句
log_queries_not_using_indexes=1