如何截断MySQL数据库日志? (mysql数据库日志截断)

数据库日志是一个非常重要的组成部分,它记录了数据库的所有操作,包括增删改查等等。在MySQL中,数据库日志以二进制日志的形式存在,在实际的应用场景中,可能会出现二进制日志太大的情况,这时有必要截断数据库日志,以减小数据库的存储压力,并且还可以优化数据库的性能。

那么如何截断MySQL数据库日志呢?下面,将对此进行详细的介绍。

一、什么是MySQL数据库日志?

MySQL的数据库日志包括二进制日志、错误日志、慢查询日志、查询日志等等。其中,二进制日志是最重要的一个,它记录了数据库的所有操作,包括insert、update、delete、create、alter等等命令,二进制日志以二进制的形式存在。

二、二进制日志的作用

二进制日志的作用非常重要,它可以用于备份、恢复、主从同步和故障恢复等操作。任何对数据库的操作都会被记录在二进制日志中,这样就可以进行数据恢复。同时,二进制日志还可以用于实现主从同步,主库将自己的二进制日志传输到从库中,从库再执行相应的操作。

三、

在MySQL中,二进制日志会不断增长,当二进制日志过大时,会对数据库的性能和存储造成不小的影响。因此,我们需要对二进制日志进行截断操作。

下面是在MySQL中如何截断二进制日志。

1. 执行SHOW MASTER STATUS;命令,查看当前MySQL服务器日志文件名称及文件偏移位置。

2. 执行FLUSH LOGS;命令,关闭当前日志文件,重新打开一个新的二进制日志文件,同时会生成一个新的日志文件。

3. 执行PURGE BINARY LOGS TO ‘日志文件名称.文件偏移位置’;命令,来截断二进制日志。这条命令的作用是将二进制日志文件中所有的日志记录过期的二进制文件删除,只保留到指定的位置为止。

4. 执行SHOW BINARY LOGS;命令,查看当前可用的日志文件。

通过以上步骤,我们就可以对MySQL的二进制日志进行截断操作。

四、小结

当数据库的二进制日志过大时,我们需要对其进行截断操作,以提高数据库的性能和存储空间的利用率。MySQL数据库提供了非常便捷的操作方式,通过上述步骤,我们就可以轻松地实现二进制日志的截断。在实际应用中,我们需要根据不同情形进行相关操作,以达到更好的效果。

相关问题拓展阅读:

如何查看mysql数据库操作记录日志

1、首先确认你日志是否启用了mysql>show variables like ‘log_bin’。

2、如果启用了,即ON,那日志文件就在mysql的安装目录的data目录下。

3、怎样知道当前的日志mysql> show master status。

4、看

二进制

日志文件用mysqlbinlog,shell>mysqlbinlog mail-bin.000001或者shell>mysqlbinlog mail-bin.| tail,Windows 下用类似的。

MySQL的日志操作:

1、首先,登陆mysql后,执行

sql语句

:show variables like ‘log_bin’。

2、#错误日志log-errol开启方式:在my.ini的选项下:添加代码:log-error=E:\log-error.txt。

记录内容:主要是记录启动、运行或停止mysqld时出现的致命性问题,都是系统级的错误记录。

3、#查询日志:log,开启方式:在my.ini的选项下:添加代码:log=E:/mysql_log.txt。

4、#二进制日志:log-bin,开启方式:在my.ini的选项下:添加代码:log-bin=E:/mysql_log_bin,记录内容:主要是记录所有的更改数据的语句,可使用mysqlbinlog命令

恢复数据

这是一个慢查询日志的展示工具,能够帮助 DBA 或者开发人员分析数据库的性能问题,给出全面的数据摆脱直接查看 slow-log。QAN(Query Analytics)

PMM 目前有 2 个版本,但是对于 QAN 来说其大致由三部分组成:

QAN-Agent(client):负责采集 slow-log 的数据并上报到服务端

QAN-API(server):负责存储采集的数据,并对外提供查询接口

QAN-APP:专门用来展示慢查询数据的 grafana 第三方插件

1. 数据流转

slow-log –> QAN-Agent –> QAN-API QAN-APP(grafana)

2. pmm1 架构图

3. pmm2 架构图

  一.错误日志

  错误日志在Mysql数据库中很重要,它记录着mysqld启动和停止,以及服务器在运行过程中发生的任何错误的相关信息。

  1.配置信息

  –log-error=用来指定错误日志存放的位置。

  如果没有指定,默认hostname.err做为文件名,默认存放在DATADIR目录中。

  也可以将log-error配置到my.cnf文件中,这样就省去了每次在启动mysqld时都手工指定–log-error.例如:

  $ vi /etc/my.cnf

  # The MySQL server

  

  ….

  log-error = /var/lib/mysql/test2_mysqld.err

  …..

  2.错误信息样板

:21:55 mysqld started

:21:55 InnoDB: Started; log sequence number

:21:55 /usr/local/mysql/bin/mysqld: ready for connections.

  Version: ‘5.0.26-standard-log’ socket: ‘/var/lib/mysql/mysql.sock’ port: 3306 MySQL Community Edition – Standard (GPL)

:24:13 /usr/local/mysql/bin/mysqld: Normal shutdown

:24:13 InnoDB: Starting shutdown…

:24:16 InnoDB: Shutdown completed; log sequence number

:24:16 /usr/local/mysql/bin/mysqld: Shutdown complete

:24:16 mysqld ended

:24:47 mysqld started

:24:47 InnoDB: Started; log sequence number

:24:47 /usr/local/mysql/bin/mysqld: ready for connections.

  Version: ‘5.0.26-standard-log’ socket: ‘/var/lib/mysql/mysql.sock’ port: 3306 MySQL Community Edition – Standard (GPL)

:33:49 /usr/local/mysql/bin/mysqld: Normal shutdown

三.查询日志

  查询日志记录了clinet的所有的语句。

  Note:由于log日志记录了数据库所有操作,对于访问频繁的系统,此种日志会造成性能影响,建议关闭。

  1.配置信息

  –log=用来指定错误日志存放的位置。

  如果没有指定,默认为主机名(hostname)做为文件名,默认存放在DATADIR目录中。

  也可以将log配置到my.cnf文件中,这样就省去了每次在启动mysqld时都手工指定–log.例如:

  # The MySQL server

  

  ……

  #query-log

  log = /var/lib/mysql/query_log.log

  ……

  2.读取查询日志

  查询日志是纯文本格可,可以使用OS文本读取工具直接打开查看。例如:

  $ tail -n 15 query_log.log

:58:28 17 Query show tables

:07:45 17 Quit

:01:48 18 Connect root@localhost on

:02:38 18 Query SELECT DATABASE()

  18 Init DB test

:02:42 18 Query show tables

:03:07 18 Query select * from pet

:06:26 18 Query insert into pet values(‘hunter’,’yxyup’,’cat’,’f’,”,null)

:06:39 18 Query select * from pet

:07:13 18 Query update pet set sex=’m’ where name=’hunter’

:07:38 18 Query delete from pet where name=’hunter’

:13:48 18 Query desc test8

:14:13 18 Query create table t1(id int,name char(10))

:14:41 18 Query alter table t1 add sex char(2)

  $

四.慢查询日志

  慢查询日志是记录了执行时间超过参数long_query_time(单位是秒)所设定值的SQL语句日志。

  Note:慢查询日志对于我们发现性能有问题的SQL有很帮助,建议使用并经常分析

  1.配置信息

  –log-slow-queries=用来指定错误日志存放的位置。

  如果没有指定,默认为hostname-slow.log做为文件名,默认存放在DATADIR目录中。

  也可以将log-slow-queries配置到my.cnf文件中,这样就省去了每次在启动mysqld时都手工指定–log-slow-queries.例如:

  # The MySQL server

  

  ……

  #slow-query-log

  log-slow-queries = /var/lib/mysql/slow_query_log.log

  ……

  2.读取慢查询日志

  $ cat slow_query_log.log

  /usr/local/mysql/bin/mysqld, Version: 5.0.26-standard-log. started with:

  Tcp port: 3306 Unix socket: /var/lib/mysql/mysql.sock

  Time Id Command Argument

  # Time::41:46

  # User@Host: root @ localhost

  # Query_time: 108 Lock_time: 0 Rows_sent: 0 Rows_examined: 8738

  use test;

  select count(1) from t1 a, t1 b,t1 c where a.id=b.id and b.name=c.name;

  # Time::52:04

  # User@Host: root @ localhost

  # Query_time: 583 Lock_time: 0 Rows_sent: 0 Rows_examined:

  select count(1) from t1 a, t1 b where a.id=b.id;

  /usr/local/mysql/bin/mysqld, Version: 5.0.26-standard-log. started with:

  Tcp port: 3306 Unix socket: /var/lib/mysql/mysql.sock

  Time Id Command Argument

  # Time::39:59

  # User@Host: root @ localhost

  # Query_time: 11 Lock_time: 0 Rows_sent:Rows_examined:

  use test;

  select id from tail;

  如果慢查询日志记录很多可以使用mysqldumpslow进行分类汇总

  $ mysqldumpslow slow_query_log.log

  Reading mysql slow query log from slow_query_log.log

  Count: 1 Time=583.00s (583s) Lock=0.00s (0s) Rows=0.0 (0), root@localhost

  select count(N) from t1 a, t1 b where a.id=b.id

  Count: 1 Time=108.00s (108s) Lock=0.00s (0s) Rows=0.0 (0), root@localhost

  select count(N) from t1 a, t1 b,t1 c where a.id=b.id and b.name=c.name

  Count: 1 Time=11.00s (11s) Lock=0.00s (0s) Rows=.0 (), root@localhost

  select id from tail;

mysql有以下几种日志:

错误日志: -log-err

查询日志: -log

慢查询日志: -log-slow-queries

更新日志: -log-update

二进制日志: -log-bin

在mysql的安装目录下,打开my.ini,在后面加上上面的参数,保存后重启mysql服务就行了。

例如:

#Enter a name for the binary log. Otherwise a default name will be used.

#log-bin=

#Enter a name for the query log file. Otherwise a default name will be used.

#log=

#Enter a name for the error log file. Otherwise a default name will be used.

log-error=

#Enter a name for the update log file. Otherwise a default name will be used.

#log-update=

查看日至:

1. 首先确认你日志是否启用了

mysql>show variables like ‘log_bin’;

如果启用了,即ON

那日志文件就在mysql的安装目录的data目录下

cat/tail 日志文件名

2. 怎样知道当前的日志

mysql> show master status;

3. 查看从某一段时间到某一段时间的日志

mysqlbinlog –start-datetime=’:00:00′

–stop-datetime=’:00:00′ /var/log/mysql/mysql-bin.

> mysqllog1.log

是否启用了日志

mysql>show variables like ‘log_bin’;

怎样知道当前的日志

mysql> show master status;

看二进制日志文件用mysqlbinlog

shell>mysqlbinlog mail-bin.000001(要写绝对问题路径

或者

shell>mysqlbinlog mail-bin.| tail

Windows 下用类似的命令。

mysql有以下几种日志: 

 

错误日志:     -log-err 

查询日志:     -log 

慢查询日志:   -log-slow-queries 

更新日志:     -log-update 

二进制日志:-log-bin

在mysql的安装目录下,打开my.ini,在后面加上上面的参数,保存后重启mysql服务就行了。 

例如:  

#Enter a name for the error log file.   Otherwise a default name will be used.

   log-error=err.log

#Enter a name for the query log file. Otherwise a default name will be used.

   #log=

#Enter a name for the slow query log file. Otherwise a default name will be used.

   #log-slow-queries=

#Enter a name for the update log file. Otherwise a default name will be used.

   #log-update=

#Enter a name for the binary log. Otherwise a default name will be used.

   #log-bin=

上面只开启了错误日志,要开其他的日志就把前面的“#”去掉。

long_query_time =1 –是指执行超过多久的sql会被log下来,这里是1秒

log-slow-queries=slowqueris.log –将查询返回较慢的语句进行记录

log-queries-not-using-indexes = nouseindex.log –就是字面意思,log下来没有使用索引的query

log=mylog.log –对所有执行语句进行记录

log-error=log-error.log

log=log-query.log

log-queries-not-using-indexes

log-warnings=2

log-slow-queries=log-slow-query.log

log-update=log-update.log

如何查看mysql数据库操作记录日志?

1、首先确认你日志是否启用了mysql>show variables like ‘log_bin’。

2、如果启用了,即ON,那日志文件就在mysql的安装目录的data目录下。

3、怎样知道当前的日志mysql> show master status。

4、看二进制日志文件用mysqlbinlog,shell>mysqlbinlog mail-bin.000001或者shell>mysqlbinlog mail-bin.| tail,Windows 下用类似的。

MySQL的日志操作:

1、首先,登陆mysql后,执行sql语句:show variables like ‘log_bin’。

2、#错误日志log-errol开启方式:在my.ini的选项下:添加代码:log-error=E:\log-error.txt。

记录内容:主要是记录启动、运行或停止mysqld时出现的致命性问题,都是系统级的错误记录。

3、#查询日志:log,开启方式:在my.ini的选项下:添加代码:log=E:/mysql_log.txt。

4、#二进制日志:log-bin,开启方式:在my.ini的选项下:添加代码:log-bin=E:/mysql_log_bin,记录内容:主要是记录所有的更改数据的语句,可使用mysqlbinlog命令恢复数据。

有时候我们会不小心对一个大表进行了 update,比如说写错了 where 条件……

此时,如果 kill 掉 update

线程

,那回滚 undo log 需要不少时间。如果放置不管,也不知道 update 会持续多久。

那我们能知道 update 的进度么?

实验

我们先创建一个测试数据库:

快速创建一些数据:

连续执行同样的 SQL 数次,就可以快速构造千万级别的数据:

查看一下总的行数:

我们来释放一个大的 update:

然后另起一个 session,观察 performance_schema 中的信息:

可以看到,performance_schema 会列出当前 SQL 从引擎获取的行数。

等 SQL 结束后,我们看一下 update 从引擎总共获取了多少行:

可以看到该 update 从引擎总共获取的行数是表大小的两倍,那我们可以估算:update 的进度 = (rows_examined) / (2 * 表行数)

?小贴士

information_schema.tables 中,提供了对表行数的估算,比起使用 select count(1) 的成本低很多,几乎可以忽略不计。

那么是不是所有的 update,从引擎中获取的行数都会是表大小的两倍呢?这个还是要分情况讨论的,上面的 SQL 更新了

主键

,如果只更新内容而不更新主键呢?我们来试验一下:

等待 update 结束,查看 row_examined,发现其刚好是表大小:

那我们怎么准确的这个倍数呢?

一种方法是靠经验:update 语句的 where 中会扫描多少行,是否修改主键,是否修改唯一键,以这些条件来估算系数。

另一种方法就是在同样结构的较小的表上试验一下,获取倍数。

关于mysql数据库日志截断的介绍到此就结束了,不知道你从中找到你需要的信息了吗 ?如果你还想了解更多这方面的信息,记得收藏关注本站。


数据运维技术 » 如何截断MySQL数据库日志? (mysql数据库日志截断)