1. 错误日志

错误日志是MySQL中最重要的日志之一,它记录了当mysql启动和停止时,以及服务器在运行过程中发生任何严重错误时的相关信息。当数据库出现任何故障导致无法正常使用时,建议首先查看此日志。

该日志是默认开启的,默认放在目录/var/log/,默认的日志文件名为mysqld.log。查看日志位置:

mysql> show variables like '%log_error%';
+----------------------------+----------------------------------------+
| Variable_name              | Value                                  |
+----------------------------+----------------------------------------+
| binlog_error_action        | ABORT_SERVER                           |
| log_error                  | /var/log/mysqld.log                    |
| log_error_services         | log_filter_internal; log_sink_internal |
| log_error_suppression_list |                                        |
| log_error_verbosity        | 2                                      |
+----------------------------+----------------------------------------+
5 rows in set (0.01 sec)

2. 二进制日志

  • 介绍
    二进制日志(binlog)记录了所有的DDL(数据定义语言)语句和DML(数据操纵语言)语句,但不包括数据查询(SELECT、SHOW)语句
    作用:
    ①.灾难时的数据恢复;
    ②.MySQL的主从复制。在MySQL8版本中,默认二进制日志时开启的,涉及到的参数如下:
mysql> show variables like '%log_bin%';
+---------------------------------+-----------------------------+
| Variable_name                   | Value                       |
+---------------------------------+-----------------------------+
| log_bin                         | ON                          |
| log_bin_basename                | /var/lib/mysql/binlog       |
| log_bin_index                   | /var/lib/mysql/binlog.index |
| log_bin_trust_function_creators | OFF                         |
| log_bin_use_v1_row_events       | OFF                         |
| sql_log_bin                     | ON                          |
+---------------------------------+-----------------------------+
6 rows in set (0.00 sec)

/var/lib/mysql目录如下:

[root@localhost pmish]# ll /var/lib/mysql/
总用量 194600
-rw-r-----. 1 mysql mysql       56 1月  12 13:50 auto.cnf
-rw-r-----. 1 mysql mysql  4813034 3月  30 16:14 binlog.000003
-rw-r-----. 1 mysql mysql      157 3月  31 11:14 binlog.000004
-rw-r-----. 1 mysql mysql      157 3月  31 11:14 binlog.000005
-rw-r-----. 1 mysql mysql       48 3月  31 11:14 binlog.index
-rw-------. 1 mysql mysql     1676 1月  12 13:50 ca-key.pem
-rw-r--r--. 1 mysql mysql     1112 1月  12 13:50 ca.pem
-rw-r--r--. 1 mysql mysql     1112 1月  12 13:50 client-cert.pem
-rw-------. 1 mysql mysql     1680 1月  12 13:50 client-key.pem
-rw-r-----. 1 mysql mysql   196608 3月  31 11:16 #ib_16384_0.dblwr
-rw-r-----. 1 mysql mysql  8585216 1月  12 13:50 #ib_16384_1.dblwr
-rw-r-----. 1 mysql mysql     3848 1月  12 14:30 ib_buffer_pool
-rw-r-----. 1 mysql mysql 12582912 3月  31 11:14 ibdata1
-rw-r-----. 1 mysql mysql 50331648 3月  31 11:16 ib_logfile0
-rw-r-----. 1 mysql mysql 50331648 1月  12 13:50 ib_logfile1
-rw-r-----. 1 mysql mysql 12582912 3月  31 11:14 ibtmp1
drwxr-x---. 2 mysql mysql      187 3月  31 11:14 #innodb_temp
drwxr-x---. 2 mysql mysql     4096 3月  17 17:52 lbfs
drwxr-x---. 2 mysql mysql      143 1月  12 13:50 mysql
-rw-r-----. 1 mysql mysql 26214400 3月  31 11:14 mysql.ibd
srwxrwxrwx. 1 mysql mysql        0 3月  31 11:14 mysql.sock
-rw-------. 1 mysql mysql        5 3月  31 11:14 mysql.sock.lock
drwxr-x---. 2 mysql mysql     8192 1月  12 13:50 performance_schema
-rw-------. 1 mysql mysql     1676 1月  12 13:50 private_key.pem
-rw-r--r--. 1 mysql mysql      452 1月  12 13:50 public_key.pem
-rw-r--r--. 1 mysql mysql     1112 1月  12 13:50 server-cert.pem
-rw-------. 1 mysql mysql     1680 1月  12 13:50 server-key.pem
drwxr-x---. 2 mysql mysql       28 1月  12 13:50 sys
-rw-r-----. 1 mysql mysql 16777216 3月  31 11:16 undo_001
-rw-r-----. 1 mysql mysql 16777216 3月  31 11:16 undo_002

MySQL的二进制日志可以说是MySQL最重要的日志了,它记录了所有的DDL和DML(除了数据查询语句)语句,以事件形式记录,还包含语句所执行的消耗的时间,MySQL的二进制日志是事务安全型的。一般来说开启二进制日志大概会有1%的性能损耗(参见MySQL官方中文手册 5.1.24版)。因此二进制日志有两个最重要的使用场景:
其一:MySQL Replication在Master端开启binlog,Mster把它的二进制日志传递给slaves来达到master-slave主从数据一致的目的。
其二:自然就是数据恢复了,通过使用mysqlbinlog工具来使恢复数据。
二进制日志包括两类文件:二进制日志索引文件(文件名后缀为.index)用于记录所有的二进制文件,二进制日志文件(文件名后缀为.00000*)记录数据库所有的DDL和DML(除了数据查询语句)语句事件。
image
业内目前推荐使用的是row模式,准确性高,虽然说文件大,但是现在有SSD和万兆光纤网络,这些磁盘IO和网络IO都是可以接受的。

- binlog日志开启

mysql的binlog这么有用我们怎么开启呢?

一. linux下:

  1. 修改my.cnf文件
# 在linux中可以通过命令查找文件位置
[root@localhost pmish]# find / -name my.cnf
/etc/my.cnf
  1. 在[mysqld]后面增加如下配置
server_id=2
log_bin=mysql-bin
binlog_format=ROW
  1. 3:重启服务并验证
systemctl restart mysqld
mysql -uroot -p
mysql> show variables like '%log_bin%';
+---------------------------------+-----------------------------+
| Variable_name                   | Value                       |
+---------------------------------+-----------------------------+
| log_bin                         | ON                          |
| log_bin_basename                | /var/lib/mysql/binlog       |
| log_bin_index                   | /var/lib/mysql/binlog.index |
| log_bin_trust_function_creators | OFF                         |
| log_bin_use_v1_row_events       | OFF                         |
| sql_log_bin                     | ON                          |
+---------------------------------+-----------------------------+
6 rows in set (0.00 sec)
#log_bin是ON说明开启了

二. windows版本(mysqsl 5.7)
1:修改mysql的配置文件my.ini

my.ini位于C:\ProgramData\MySQL\MySQL Server 5.7。该文件默认不允许修改,需要右键取得所有权之后才能保存修改。

在[mysqld]下添加以下参数:

log-bin=mysql-bin
binlog_format=Row

2:重启mysql验证

- binlog日志查看

  1. 在mysql中查看
mysql> show binlog events; #只查看第一个binlog文件的内容 
mysql> show binlog events ``in 'mysql-bin.000002'``;#查看指定binlog文件的内容 
mysql> show binary logs; #获取binlog文件列表 
mysql> show master status; #查看当前正在写入的binlog文件

可以在navicat等可视化工具中执行
image

  1. 通过二进制日志查询工具mysqlbinlog来查看

mysqlbinlog是一个查看mysql二进制日志的工具,可以把mysql上面的所有操作记录从日志里导出,这个工具默认的安装路径为:/usr/local/mysql/bin/mysqlbinlog

可以通过find / -name "mysqlbinlog"命令查找mysqlbinlog的工具路径。
mysqlbinlog具体语法:

mysqlbinlog [参数选择] logfilename 


参数选项:
	-d 		指定数据库名称,只列出指定的数据库相关操作。
	-o		忽略掉日志中的前n行命令。
	-v		将行事件(数据变更)重构为SQL语句。
	-vv		将行事件(数据变更)重构为SQL语句,并输出注释信息

示例:

[root@localhost pmish]# mysqlbinlog -d lbfs /var/lib/mysql/binlog.000003
BINLOG '
2O0gZBMBAAAATgAAAFRwSQAAAGQAAAAAAAEABGxiZnMACmRjaXJfcXVlcnkACAgPCAgPDw8PCvwD
/AP8A/wD/AP+AQEAAgP8/wDuM6f9
2O0gZB4BAAAAdwAAAMtwSQAAAGQAAAAAAAEAAgAI/wjsrwAAAAAAABIAMjAyMzAzMjcwODQxNDlf
MTE4K6SDIIcBAAAIADFfMV84XzQyAwAxMjMCADQyGgDphY3mlrnlkI3np7AyMDIzMDMyNzA4NDE1
MGEpBl4=
'/*!*/;
### INSERT INTO `lbfs`.`dcir_query`
### SET
###   @1=45036 /* LONGINT meta=0 nullable=0 is_null=0 */
###   @2='20230327084149_118' /* VARSTRING(1020) meta=1020 nullable=1 is_null=0 */
###   @3=1679877710891 /* LONGINT meta=0 nullable=1 is_null=0 */
###   @4=NULL /* LONGINT meta=0 nullable=1 is_null=1 */
###   @5='1_1_8_42' /* VARSTRING(1020) meta=1020 nullable=1 is_null=0 */
###   @6='123' /* VARSTRING(1020) meta=1020 nullable=1 is_null=0 */
###   @7='42' /* VARSTRING(1020) meta=1020 nullable=1 is_null=0 */
###   @8='配方名称20230327084150' /* VARSTRING(1020) meta=1020 nullable=1 is_null=0 */
# at 4813003
#230327  9:14:00 server id 1  end_log_pos 4813034 CRC32 0xaad8b8c1 	Xid = 19538
COMMIT/*!*/;
SET @@SESSION.GTID_NEXT= 'AUTOMATIC' /* added by mysqlbinlog */ /*!*/;
DELIMITER ;
# End of log file
/*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

- binlog日志删除

三种常见命令:
image
设置日志自动过期:
在mysql的配置文件中配置二进制日志的过期时间,设置了之后,二进制日志过期会自动删除。

  1. 查看过期时间
mysql> show variables like '%binlog_expire_logs_seconds%';

+----------------------------+---------+
| Variable_name              | Value   |
+----------------------------+---------+
| binlog_expire_logs_seconds | 2592000 |
+----------------------------+---------+
1 row in set (0.00 sec)
  1. 修改过期时间

1.临时生效

  # 查看默认设置的过期时间

    show variables like "%expire_logs%";

  # 设置保留15天

    set global expire_logs_days=15

  # 刷新日志

    flush logs;

  #查看新生成的binlog日志

    show master status\G:

  注意:以上命令在数据库执行会立即生效,请确定设置数据的保留日期,以免误删

2.永久生效  

  # 修改配置文件

    vim /etc/my.cnf

    [mysqld]模块

    expire_logs_days=15

  注意:在配置文件修改后,需要重启才能永久生效。另,0表示永不过期,单位是天

3. 查询日志

查询日志中记录了客户端的所有操作语句,而二进制日志不包含查询数据的SQL 语句。默认情况下,查询日志事未开启的。如果要开启查询日志,可以设置以下配置:

mysql> show variables like '%general%';
+------------------+------------------------------+
| Variable_name    | Value                        |
+------------------+------------------------------+
| general_log      | OFF                          |
| general_log_file | /var/lib/mysql/localhost.log |
+------------------+------------------------------+
2 rows in set (0.00 sec)

# 修改MySQL的配置文件 /etc/my.cnf文件,添加如下内容:
general_log=1
该选项用来开启查询日志,可选值:0或者1;0代表关闭,1代表开启

#设置日志的文件名,如果没有指定,默认的文件名为host_name.log
general_log_file=mysql_query.log

4. 慢查询日志

慢查询日志记录了所有执行时间超过参数long_query_time设置值并且扫描记录数不小于min_examined_row_limit的所有的SQL语句的日志,默认未开启。long_query_time默认为10秒,最小为0,精度可以到微妙。

  • 查看是否开启以及文件位置
mysql> show variables like '%slow%';
+-----------------------------+-----------------------------------+
| Variable_name               | Value                             |
+-----------------------------+-----------------------------------+
| log_slow_admin_statements   | OFF                               |
| log_slow_extra              | OFF                               |
| log_slow_replica_statements | OFF                               |
| log_slow_slave_statements   | OFF                               |
| slow_launch_time            | 2                                 |
| slow_query_log              | OFF                               |
| slow_query_log_file         | /var/lib/mysql/localhost-slow.log |
+-----------------------------+-----------------------------------+
7 rows in set (0.00 sec)

慢查询日志:修改/etc/my.cnf
slow_query_log=1
执行时间参数
long_query_time=2
默认情况下,不会记录管理语句,也不会记录不使用索引进行查找的查询。可以使用log_show_admin_statements和更改行为log_queries_not_using_indexes,如下所述

记录执行较慢的管理语句
log_slow_admin_statements=1
记录执行较慢的未使用索引的语句
log_queries_not_using_indexes=1

posted on 2023-04-06 09:47  一贯可乐  阅读(86)  评论(0编辑  收藏  举报



123