MYSQL优化之数据表碎片整理详解


Posted in MySQL onApril 03, 2022

在MySQL中,我们经常会使用VARCHAR、TEXT、BLOB等可变长度的文本数据类型。不过,当我们使用这些数据类型之后,我们就不得不做一些额外的工作——MySQL数据表碎片整理。

那么,为什么在使用这些数据类型之后,我们就要对MySQL定期进行碎片整理呢?

现在,我们先来看一个具体的例子。在这里,我们使用如下SQL语句在MySQL自带的TEST数据库中创建名为DEMO的数据表并插入5条测试数据。

--创建DEMO表
CREATE TABLE DEMO(
id int	unsigned,
body text
) engine=myisam charset=utf8;
												
 
--插入5条测试数据
INSERT INTO DEMO VALUES(1,'AAAAA');
INSERT INTO DEMO VALUES(2,'BBBBB');
INSERT INTO DEMO VALUES(3,'CCCCC');
INSERT INTO DEMO VALUES(4,'DDDDD');
INSERT INTO DEMO VALUES(5,'EEEEE');

然后我们以这5条测试数据为基础,使用如下INSERT INTO语句重复执行多次进行复制性插入。

INSERT INTO DEMO SELECT id, body FROM DEMO;

MYSQL优化之数据表碎片整理详解

使用INSERT INTO语句多次插入产生总共约262万条数据

众所周知,MySQL中MyISAM表的数据是以文件形式存储的,我们可以在MySQL存储数据的文件夹中找到数据库test目录下的demo.MYD文件。此时,我们可以看到demo.MYD文件的大小约为50MB。

MYSQL优化之数据表碎片整理详解

demo.MYD文件约为50MB

此时,假如我们需要删除DEMO表中所有ID列小于3的数据(即1和2),于是我们执行如下SQL语句:

DELETE FROM DEMO WHERE id < 3

此时,我们可以看到DEMO表中的数据量只有原来的3/5:

MYSQL优化之数据表碎片整理详解

删除后,只剩下157万条记录

DEMO表中的现有数据量只有原来的3/5,按理说,这个时候demo.MYD文件的大小也应该只有原来的3/5左右。不过,我们再次查看demo.MYD文件时,却惊奇地发现该文件的大小一点都没有变!

MYSQL优化之数据表碎片整理详解

删除数据后,demo.MYD的文件大小没有变化

那么就究竟是怎么一回事呢?原来,在MySQL中,如果我们删除了表中的大量数据,或者我们对含有可变长度文本数据类型(VARCHAR,TEXT或BLOB)的表进行了很多更改,不过被删除的数据记录仍然被保持在MySQL的链接清单中,因此数据存储文件的大小并不会随着数据的删除而减小。

当我们确定数据需要被清除掉时,那么这些数据就已经成了无用的数据,但是按照MySQL的处理方式,这些数据仍然会占用我们的磁盘空间,从而造成了极大的资源浪费。不仅如此,过大的数据文件还会导致MySQL执行相关数据操作时需要耗费更多的性能和时间。因此,对MySQL的某些数据表进行碎片整理是非常有必要的。

对MySQL进行碎片整理的方法非常简单,因为MySQL已经给我们提供了对应的SQL指令,这个SQL指令就是OPTIMIZE TABLE,其完整语法如下:

OPTIMIZE [LOCAL | NO_WRITE_TO_BINLOG] TABLE table_name1 [, table_name2] ...

从上面的语法描述中,我们可以得知,OPTIMIZE TABLE可以一次性对多个表进行碎片整理,只需要在OPTIMIZE TABLE后面接多个表名,并以英文逗号隔开即可。

此外,OPTIMIZE TABLE语句有两个可选的关键字:LOCAL和NO_WRITE_TO_BINLOG。在默认情况下,OPTIMIZE TABLE语句将会被记录到二进制日志中,如果我们指定了LOCAL或NO_WRITE_TO_BINLOG关键字,则不会记录。当然,一般情况下,我们也无需关注这两个关键字。

现在,我们就使用OPTIMIZE TABLE语句对刚才的DEMO表进行碎片整理。

MYSQL优化之数据表碎片整理详解

对demo表进行碎片整理

然后,我们再来查看demo.MYD文件,此时我们就会发现demo.MYD文件的大小已经减小到约为原来的3/5了。

MYSQL优化之数据表碎片整理详解

碎片整理后demo.MYD文件的大小

备注:

1.MySQL官方建议不要经常(每小时或每天)进行碎片整理,一般根据实际情况,只需要每周或者每月整理一次即可。

2.OPTIMIZE TABLE只对MyISAM,BDB和InnoDB表起作用,尤其是MyISAM表的作用最为明显。此外,并不是所有表都需要进行碎片整理,一般只需要对包含上述可变长度的文本数据类型的表进行整理即可。

3.在OPTIMIZE TABLE运行过程中,MySQL会锁定表。

4.默认情况下,直接对InnoDB引擎的数据表使用OPTIMIZE TABLE,可能会显示「 Table does not support optimize, doing recreate + analyze instead」的提示信息。这个时候,我们可以用mysqld --skip-new或者mysqld --safe-mode命令来重启MySQL,以便于让其他引擎支持OPTIMIZE TABLE。

总结

到此这篇关于MYSQL优化之数据表碎片整理的文章就介绍到这了,更多相关MYSQL数据表碎片整理内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

MySQL 相关文章推荐
MySQL sql_mode的使用详解
May 08 MySQL
浅谈mysql执行过程以及顺序
May 12 MySQL
浅谈mysql增加索引不生效的几种情况
Jun 23 MySQL
MySQL系列之十三 MySQL的复制
Jul 02 MySQL
SQL之各种join小结详细讲解
Aug 04 MySQL
MySQL命令无法输入中文问题的解决方式
Aug 30 MySQL
Mysql实现简易版搜索引擎的示例代码
Aug 30 MySQL
MySQL约束超详解
Sep 04 MySQL
mysql5.7的安装及Navicate长久免费使用的实现过程
Nov 17 MySQL
mysql函数之截取字符串的实现
Aug 14 MySQL
MySQL中dd::columns表结构转table过程及应用详解
Sep 23 MySQL
MySQL新手入门进阶语句汇总
Sep 23 MySQL
Innodb存储引擎中的后台线程详解
Apr 03 #MySQL
MySQL磁盘碎片整理实例演示
Mysql使用全文索引(FullText index)的实例代码
Apr 03 #MySQL
一文简单了解MySQL前缀索引
为什么MySQL不建议使用SELECT *
详解MySQL的主键查询为什么这么快
MySQL表锁、行锁、排它锁及共享锁的使用详解
You might like
php学习笔记(三)操作符与控制结构
2011/08/06 PHP
thinkphp3.0 模板中函数的使用
2012/11/13 PHP
thinkphp查询,3.X 5.0方法(亲试可行)
2017/06/17 PHP
PHP读取文件或采集时解决中文乱码
2021/03/09 PHP
javascript 打印内容方法小结
2009/11/04 Javascript
javascript 使用 NodeList需要注意的问题
2013/03/04 Javascript
简洁Ajax函数处理(示例代码)
2013/11/15 Javascript
使用jQuery处理AJAX请求的基础学习教程
2016/05/10 Javascript
详解nodejs express下使用redis管理session
2017/04/24 NodeJs
详解jQuery中的isPlainObject()使用方法
2018/02/27 jQuery
layerUI下的绑定事件实例代码
2018/08/17 Javascript
你应该了解的JavaScript Array.map()五种用途小结
2018/11/14 Javascript
layui(1.0.9)文件上传upload,前后端的实例代码
2019/09/26 Javascript
AI小程序之语音听写来了,十分钟掌握百度大脑语音听写全攻略
2020/03/13 Javascript
JavaScript装箱及拆箱boxing及unBoxing用法解析
2020/06/15 Javascript
vue 实现element-ui中的加载中状态
2020/11/11 Javascript
[01:07:34]DOTA2-DPC中国联赛定级赛 RNG vs Aster BO3第二场 1月9日
2021/03/11 DOTA
pycharm 使用心得(七)一些实用功能介绍
2014/06/06 Python
Python3 能振兴 Python的原因分析
2014/11/28 Python
python pandas dataframe 按列或者按行合并的方法
2018/04/12 Python
python docx 中文字体设置的操作方法
2018/05/08 Python
python开启摄像头以及深度学习实现目标检测方法
2018/08/03 Python
python爬取网易云音乐评论
2018/11/16 Python
详解Python logging调用Logger.info方法的处理过程
2019/02/12 Python
10招!看骨灰级Pythoner玩转Python的方法
2019/04/15 Python
python自带tkinter库实现棋盘覆盖图形界面
2019/07/17 Python
小结Python的反射机制
2020/09/28 Python
英国家喻户晓的折扣商场:TK Maxx
2017/05/26 全球购物
7 For All Mankind官网:美国加州洛杉矶的高级牛仔服装品牌
2018/12/20 全球购物
管理信息系学生的自我评价
2014/01/11 职场文书
中学生运动会入场词
2014/02/12 职场文书
幼儿教师师德师风演讲稿
2014/08/22 职场文书
高考诚信考试承诺书
2015/04/29 职场文书
庆祝教师节主持词
2015/07/06 职场文书
2016入党心得体会范文
2016/01/06 职场文书
浅谈Python数学建模之固定费用问题
2021/06/23 Python