Mysql binlog日志文件过大的解决


Posted in MySQL onOctober 05, 2021

磁盘突然报错使用率过大,排查原因,发现mysql的binlog文件占用过大

命令

ls -l -h

Mysql binlog日志文件过大的解决

mysql-binlog是MySQL数据库的二进制日志,用于记录用户对数据库操作的SQL语句((除了数据查询语句)信息。可以使用mysqlbin命令查看二进制日志的内容。

可以通过设置my.cof配置文件的方式限制binlog文件的输出。

1、相关binlog配置

vim /etc/my.cof

[mysqld]
expire_logs_days = 3
#设置binlog清理时间

max_binlog_size = 100m
#binlog每个日志文件大小

binlog_cache_size = 4m
#binlog缓存大小

max_binlog_cache_size = 512m
#最大binlog缓存大小

重启mysql,看到只保留了前三天的日志

Mysql binlog日志文件过大的解决

2、binlog相关高级设置

2.1 改变binlog模式

binlog的模式也有三种:STATEMENT、ROW、MIXED 。下面对这三种格式分别加以说明:

STATMENT模式

基于SQL语句的复制(statement-based replication, SBR),每一条会修改数据的sql语句会记录到binlog中。

优点:不需要记录每一条SQL语句与每行的数据变化,这样子binlog的日志也会比较少,减少了磁盘IO,提高性能。

缺点:在某些情况下会导致master-slave中的数据不一致(如sleep()函数, last_insert_id(),以及user-defined functions(udf)等会出现问题)

ROW模式

不记录每一条SQL语句的上下文信息,仅需记录哪条数据被修改了,修改成了什么样子了。

优点:不会出现某些特定情况下的存储过程、或function、或trigger的调用和触发无法被正确复制的问题。

缺点:会产生大量的日志,尤其是alter table的时候会让日志暴涨。

MIXED模式

混合模式复制(mixed-based replication, MBR):以上两种模式的混合使用,一般的复制使用STATEMENT模式保存binlog,对于STATEMENT模式无法复制的操作使用ROW模式保存binlog,MySQL会根据执行的SQL语句选择日志保存方式。
修改配置文件

[mysqld]
binlog_format = mixed
#设置日志格式

2.2 相关SQL操作binlog

show binary logs;                            
# 查看binlog现有详情

show variables like '%log%';            
# 查看log变量的相关配置

set global expire_logs_days = 3;    
# 设置binlog的保存时间

reset master;                                 
# 重置所有的binlog,相当于删除所有的binlog,这个操作对主从集群影响非常大,因为主从赋值是基于binlog日志来实现的

PURGE {MASTER | BINARY} LOGS TO 'log_name'
PURGE {MASTER | BINARY} LOGS BEFORE 'date'
# 删除指定的日志或日期之前的日志索引中的所有二进制日志。MASTER和BINARY是同义词

PURGE MASTER LOGS TO 'binlog.000013'; 
#清除binlog.000013日志

PURGE MASTER LOGS BEFORE '2020-01-08 10:00:00';  
#清除2020-01-08 10:00:00前binlog日志

PURGE MASTER LOGS BEFORE DATE_SUB( NOW( ), INTERVAL 3 DAY); 
# 清除3天前binlog日志BEFORE,变量的date自变量可以为'YYYY-MM-DD hh:mm:ss'格式。

到此这篇关于Mysql binlog日志文件过大的解决的文章就介绍到这了,更多相关Mysql binlog日志过大内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

MySQL 相关文章推荐
MySQL学习总结-基础架构概述
Apr 05 MySQL
mysql数据库入门第一步之创建表
May 14 MySQL
Mysql基础知识点汇总
May 26 MySQL
详解MySQL集群搭建
May 26 MySQL
浅谈MySQL 亿级数据分页的优化
Jun 15 MySQL
解决mysql:ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: NO/YES)
Jun 26 MySQL
MySQL系列之一 MariaDB-server安装
Jul 02 MySQL
SQL实现LeetCode(175.联合两表)
Aug 04 MySQL
关于mysql中时间日期类型和字符串类型的选择
Nov 27 MySQL
一次SQL如何查重及去重的实战记录
Mar 13 MySQL
使用Mysql计算地址的经纬度距离和实时位置信息
Apr 29 MySQL
MySQL深分页问题解决思路
Dec 24 MySQL
MySQL修炼之联结与集合浅析
MySQL分库分表详情
MySQL空间数据存储及函数
Sep 25 #MySQL
MySQL基础快速入门知识总结(附思维导图)
MySQL连接控制插件介绍
Sep 25 #MySQL
Mysql案例刨析事务隔离级别
Sep 25 #MySQL
MySQL定时备份数据库(全库备份)的实现
Sep 25 #MySQL
You might like
Protoss魔法科技
2020/03/14 星际争霸
php中echo()和print()、require()和include()等易混淆函数的区别
2012/02/22 PHP
PHP的加密方式及原理
2012/06/14 PHP
php获取参数的几种方法总结
2014/02/18 PHP
Laravel搭建后台登录系统步骤详解
2016/07/26 PHP
PHP设计模式之适配器模式定义与用法详解
2018/04/03 PHP
Nigma vs Liquid BO3 第一场2.13
2021/03/10 DOTA
js 数据类型转换总结笔记
2011/01/17 Javascript
jquery控制左右箭头滚动图片列表的实例
2013/05/20 Javascript
用js的for循环获取radio选中的值
2013/10/21 Javascript
使用jquery选择器如何获取父级元素、同级元素、子元素
2014/05/14 Javascript
Jquery使用css方法改变样式实例
2015/05/18 Javascript
javascript跨域总结之window.name实现的跨域数据传输
2015/11/01 Javascript
JavaScript中rem布局在react中的应用
2015/12/09 Javascript
jQuery数据类型小结(14个)
2016/01/08 Javascript
jquery $.trim()去除字符串空格的实现方法【附图例】
2016/03/30 Javascript
jquery根据td给相同tr下其他td赋值的实现方法
2016/10/05 Javascript
bootstrap table复杂操作代码
2016/11/01 Javascript
jQuery事件详解
2017/02/23 Javascript
80%应聘者都不及格的JS面试题
2017/03/21 Javascript
深入理解 JavaScript 中的 JSON
2017/04/06 Javascript
微信小程序icon组件使用详解
2018/01/31 Javascript
解决微信小程序调用moveToLocation失效问题【超简单】
2019/04/12 Javascript
AjaxFileUpload.js实现异步上传文件功能
2019/04/19 Javascript
解决vuex数据异步造成初始化的时候没值报错问题
2019/11/13 Javascript
Vue使用Three.js加载glTF模型的方法详解
2020/06/14 Javascript
javascript全局自定义鼠标右键菜单
2020/12/08 Javascript
python的文件操作方法汇总
2017/11/10 Python
浅谈Python2获取中文文件名的编码问题
2018/01/09 Python
Pycharm设置界面全黑的方法
2018/05/23 Python
python多进程下的生产者和消费者模型
2020/05/07 Python
奥地利网上现代灯具和灯饰店:Lampenwelt.at
2018/01/29 全球购物
学校安全教育制度
2014/01/31 职场文书
2016年大学生就业指导课心得体会
2015/10/09 职场文书
简单了解 MySQL 中相关的锁
2021/05/25 MySQL
Java 中的 Unsafe 魔法类的作用大全
2021/06/26 Java/Android