MySQL 事务日志和错误日志

2022/9/18 2:16:23

本文主要是介绍MySQL 事务日志和错误日志,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!

日志的概念:

MySQL的日志是用来记录用户的相关操作、系统的运行状态等信息的文件结合。

MySQL的事务日志:transaction log

事务日志就是mysql执行事务过程中产生的日志。

mysql事务日志的分类:
  • redo log:基于WAl机制在数据更改前先把对应操作记录下来。

  • undo log:记录和日志操作相反的操作。(例如撤销以前的操作)

注意:
  • 事务日志一般是存储引擎自行管理和使用的,默认存放在mysql数据文件夹里面的。

  • 因为事务日志是追加写入的,所以推荐将事务日志单独放在一个磁盘上面。

innodb事务日志的相关配置:
  • 查看和日志相关的信息(日志大小、所在位置、有几个日志等)
mysql> show variables like '%innodb_log%';
+-----------------------------+----------+
| Variable_name               | Value    |
+-----------------------------+----------+
| innodb_log_buffer_size      | 16777216 | --- #每个日志文件大小(字节为单位)
| innodb_log_checksums        | ON       |
| innodb_log_compressed_pages | ON       |
| innodb_log_file_size        | 50331648 |
| innodb_log_files_in_group   | 2        | --- #日志组成员个数(有几个日志)
| innodb_log_group_home_dir   | ./       | --- ##事务文件路径
| innodb_log_write_ahead_size | 8192     |
+-----------------------------+----------+
7 rows in set (0.00 sec)
[root@CentOS8 mysql]# ll -h /var/lib/mysql/
total 121M
-rw-r----- 1 mysql mysql   56 Sep 16 23:36 auto.cnf
-rw------- 1 mysql mysql 1.7K Sep 16 23:36 ca-key.pem
-rw-r--r-- 1 mysql mysql 1.1K Sep 16 23:36 ca.pem
-rw-r--r-- 1 mysql mysql 1.1K Sep 16 23:36 client-cert.pem
-rw------- 1 mysql mysql 1.7K Sep 16 23:36 client-key.pem
-rw-r----- 1 mysql mysql  277 Sep 16 23:49 ib_buffer_pool
-rw-r----- 1 mysql mysql  12M Sep 16 23:49 ibdata1
-rw-r----- 1 mysql mysql  48M Sep 16 23:49 ib_logfile0
-rw-r----- 1 mysql mysql  48M Sep 16 23:36 ib_logfile1
-rw-r----- 1 mysql mysql  12M Sep 16 23:49 ibtmp1
drwxr-x--- 2 mysql mysql 4.0K Sep 16 23:36 mysql
srwxrwxrwx 1 mysql mysql    0 Sep 16 23:49 mysql.sock
-rw------- 1 mysql mysql    6 Sep 16 23:49 mysql.sock.lock
drwxr-x--- 2 mysql mysql 4.0K Sep 16 23:36 performance_schema
-rw------- 1 mysql mysql 1.7K Sep 16 23:36 private_key.pem
-rw-r--r-- 1 mysql mysql  452 Sep 16 23:36 public_key.pem
-rw-r--r-- 1 mysql mysql 1.1K Sep 16 23:36 server-cert.pem
-rw------- 1 mysql mysql 1.7K Sep 16 23:36 server-key.pem
drwxr-x--- 2 mysql mysql  12K Sep 16 23:36 sys

优化建议:
  • 调整日志文件的个数和单个日志文件的大小

  • 将事务日志等文件迁移到一个新的分区中,和其他文件分开,因为事务日志文件写入方式是追加写入的。放在独立的分区中使得数据存放连续,可以减少磁盘的碎片。

事务日志的优化;

MySQL写文件有两块缓存,一块是MySQL的缓冲区,还有一块是操作系统内核的缓冲区。

  • 通过 innodb_flush_log_at_trx_commit 定义事务的提交方式:
innodb_flush_log_at_trx_commit=0 --- 1S写一次磁盘

每隔一秒把MySQL缓冲区(log buffer)刷到文件系统中(os buffer)去,并且调用文件系统的“flush”操作将缓存刷新到磁盘上去。

也就是说一秒之前的日志都保存在日志缓冲区,也就是内存上,如果机器宕掉,可能丢失1秒的事务数据


innodb_flush_log_at_trx_commit=1:只要提交数据就把数据写入磁盘,但是会带来比较多的ip操作。

表示在每次事务提交的时候,都把log buffer刷到文件系统中(os buffer)去,并且调用文件系统的“flush”操作将缓存刷新到磁盘上去。

这样的话,数据库对IO的要求就非常高了,如果底层的硬件提供的IOPS比较差,那么MySQL数据库的并发很快就会由于硬件IO的问题而无法提升


innodb_flush_log_at_trx_commit=2 --- 1S写一次磁盘

表示在每次事务提交的时候会把mysql缓冲区(log buffer)刷到文件系统(os buffer)中去,但并不会立即刷写到磁盘。

如果只是MySQL数据库挂掉了,由于文件系统没有问题,那么对应的事务数据并没有丢失。

# mysql崩溃的概率比操作系统崩溃的概率高,所以安全性比0要强一点
优化建议:

高并发业务行业最佳实践,是使用第三种折衷配置(=2)

MySQL错误日志

MySQL错误日志记录的就是mysql启动、运行过程中产生的错误信息。

MySQL错误日志的存放位置:

查看MySQL错误日志的存放位置:

mysql> SHOW GLOBAL VARIABLES LIKE 'log_error';

例如:

mysql5.6:
mysql> show variables like 'log_error';
+---------------+------------------+
| Variable_name | Value            |
+---------------+------------------+
| log_error     | ./CentOS8.cc.err |
+---------------+------------------+
1 row in set (0.01 sec)

mysql5.7:
mysql> show variables like 'log_error';
+---------------+---------------------+
| Variable_name | Value               |
+---------------+---------------------+
| log_error     | /var/log/mysqld.log |
+---------------+---------------------+
1 row in set (0.00 sec)


mysql8.0:
mysql> show global variables like 'log_error';
+---------------+---------------------------+
| Variable_name | Value                     |
+---------------+---------------------------+
| log_error     | /var/log/mysql/mysqld.log |
+---------------+---------------------------+
1 row in set (0.01 sec)

注意:(MySQL5.6)
  • 默认情况下,错误日志存储在mysql数据库的数据文件中

  • 错误日志文件通常的名称为hostname.err

MySQL的三个目录:
二进制/源码包目录:网上下载的安装包存放位置

mysql的数据存放目录:MySQL数据存放位置

mysql程序存放目录:MySQL应用程序的安装位置
更改mysql错误日志的存放路径:
log-err是定义是否启用错误日志的功能和错误日志的存储位置

例如:

[root@CentOS8 mysql]# cat /etc/my.cnf | grep -v -E '^#';

[mysqld]
datadir=/var/lib/mysql
log-error=/var/log/mysqld.log

mysql记录哪些警告信息至错误日志文件

log_warnings用于标识警告信息是否一并记录到错误日志中

  • log_warnings的值为0,表示不记录警告信息。

  • log_warnings的值为1,表示警告信息一并记录到错误日志中。

  • log_warnings的值大于1,表示”失败的连接”的信息和创建新连接时”拒绝访问”类的错误信息也会被记录到错误日志中。

mysq5.6默认值:
mysql> SHOW GLOBAL VARIABLES LIKE 'log_warnings';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| log_warnings  | 1     |
+---------------+-------+
1 row in set (0.00 sec)

mysql8.0或5.7默认值:
mysql> SHOW GLOBAL VARIABLES LIKE 'log_error_verbosity';
+---------------------+-------+
| Variable_name       | Value |
+---------------------+-------+
| log_error_verbosity | 2     |
+---------------------+-------+
1 row in set (0.00 sec)

注意:mysql8.0将log_warnings变成了long_error_verbosity

                   

这篇关于MySQL 事务日志和错误日志的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!


扫一扫关注最新编程教程