PHP优化之批量操作MySQL实例分析


Posted in PHP onApril 23, 2020

本文实例讲述了PHP优化之批量操作MySQL。分享给大家供大家参考,具体如下:

设计一个数据表如下:

create table optimization(
  id INT NOT NULL AUTO_INCREMENT,
  value VARCHAR(10) NOT NULL,
  PRIMARY KEY(id)
);

现在有一个业务需求需要批量插入数据。

先来看看下面这一段代码:

<?php
  $dsn = 'mysql:dbname=test;host=127.0.0.1';
  $user = 'root';
  $password = 'root';

  try {
    $dbh = new PDO($dsn, $user, $password);
  } catch(PDOException $e) {
    echo 'Connection failed: ' , $e->getMessage();
  }
  $begin = microtime(true) * 1000;

  $count = 100;
  $stmt = $dbh->prepare('INSERT INTO `optimization` (id, value) VALUES(:id, :value)');
  $stmt->bindParam(':id', $id);
  $stmt->bindParam(':value', $value);
  for ($i = 0; $i < $count; $i++)
  {
    $id = '';
    $value = $i;
    $stmt->execute();
  }

  $end = microtime(true) * 1000;
  echo 'excuted : ' , ($end - $begin) , ' ms';

经过测试,上面代码运行结果如下:

1、excuted : 7601.4348144531 ms

2、excuted : 7476.4270019531 ms

3、excuted : 7674.4387207031 ms

平均:7584.100179036433 ms

再来看看第二段代码:

<?php
  $dsn = 'mysql:dbname=test;host=127.0.0.1';
  $user = 'root';
  $password = 'root';

  try {
    $dbh = new PDO($dsn, $user, $password);
  } catch(PDOException $e) {
    echo 'Connection failed: ' , $e->getMessage();
  }

  $begin = microtime(true) * 1000;
  $dbh->beginTransaction();
  try {
    $count = 100;
    $sql = 'INSERT INTO `optimization` (id, value) VALUES ';
    $sql_arr = array();
    $sql_str = '';
    for ($i = 0; $i < $count; $i++)
    {
      $sql_arr[] = ("('', $i)");
    }
    $sql_str = implode(',', $sql_arr);
    $sql .= $sql_str;
    $stmt = $dbh->prepare($sql);
    $stmt->execute();
    $dbh->commit();
  } catch(Exception $e) {
    $dbh->rollBack();
    echo $e->getMessage() . '<br>';
  }

  $end = microtime(true) * 1000;
  echo 'excuted : ' , ($end - $begin) , ' ms';

上面这段代码的运行结果如下:

1、excuted : 99.005859375 ms

2、excuted : 103.00610351562 ms

3、excuted : 68.00390625 ms

平均:90.00528971354 ms

##分析 可以看出,在第二段代码中,使用了批量插入,此时的效率比第一段提高了84%。原因如下:

  • 使用第一段代码的时候,因为每一次循环里都执行了一个mysql语句,此时php需要与mysql获得连接,然后再执行mysql语句,然后再断开。这就是第一段代码最主要的时间开销?PHP与MySQL连接的网络传输IO
  • 第一段代码SQL语句解析的次数更多

因此,在第二段代码中,通过合并SQL语句来实现减少SQL语句解析的次数以及PHP与MySQL连接的次数来达到减少网络传输IO的开销。

注意: 1、SQL语句是有长度限制的,因此,在进行SQL语句合并时务必不能超过SQL长度限制,通过设置max_allowed_packet可以修改,默认是1M,测试时修改为8M。

##总结

在进行对数据库的批量操作(如:插入、更新、修改)时,应当尽可能将SQL语句合并后再执行而不是在循环中依次执行。

记录下最近在项目中犯下的一个比较大的错误,以后不能再犯了。以前一直都没有注意到,直到现在真正参与到企业项目中,自己的代码被老大指出错误后才发现自己的错误。学习了。

希望本文所述对大家PHP程序设计有所帮助。

PHP 相关文章推荐
PHP配置心得包含MYSQL5乱码解决
Nov 20 PHP
PHP入门学习的几个不错的实例代码
Jul 13 PHP
理解和运用PHP中的多态性[译]
Aug 02 PHP
php中读写文件与读写数据库的效率比较分享
Oct 19 PHP
php函数指定默认值方法的小例子
Dec 04 PHP
php面象对象数据库操作类实例
Dec 02 PHP
php获取json数据所有的节点路径
May 17 PHP
Yii2组件之多图上传插件FileInput的详细使用教程
Jun 20 PHP
php实现微信扫码自动登陆与注册功能
Sep 22 PHP
PHP 7.1中AES加解密方法mcrypt_module_open()的替换方案
Oct 17 PHP
使用composer安装使用thinkphp6.0框架问题【视频教程】
Oct 01 PHP
PDO实现学生管理系统
Mar 21 PHP
Thinkphp 框架扩展之Widget扩展实现方法分析
Apr 23 #PHP
Thinkphp 框架扩展之行为扩展原理与实现方法分析
Apr 23 #PHP
Thinkphp 框架扩展之标签库驱动原理与用法分析
Apr 23 #PHP
Thinkphp 框架扩展之数据库驱动常用方法小结
Apr 23 #PHP
Thinkphp 框架扩展之类库扩展操作详解
Apr 23 #PHP
TP框架实现上传一张图片和批量上传图片的方法分析
Apr 23 #PHP
php实现将数组或对象写入到文件的方法小结【三种方法】
Apr 22 #PHP
You might like
一个用于MySQL的PHP XML类
2006/10/09 PHP
PHP字符串中特殊符号的过滤方法介绍
2014/02/18 PHP
php自定义函数截取汉字长度
2014/05/15 PHP
PHP rsa加密解密使用方法
2015/04/27 PHP
php PDO实现的事务回滚示例
2017/03/23 PHP
瀑布流布局并自动加载实现代码
2013/03/12 Javascript
对于this和$(this)的个人理解
2013/09/08 Javascript
直接在JS里创建JSON数据然后遍历使用
2014/07/25 Javascript
JavaScript使表单中的内容显示在屏幕上的方法
2015/06/29 Javascript
每天一篇javascript学习小结(面向对象编程)
2015/11/20 Javascript
探究JavaScript函数式编程的乐趣
2015/12/14 Javascript
javascript表单处理具体实现代码(表单、链接、按钮)
2016/05/07 Javascript
javascript与jquery动态创建html元素示例
2016/07/25 Javascript
jQuery得到多个值只能用取Class ,不能用取ID的方法
2016/12/04 Javascript
解决vue接口数据赋值给data没有反应的问题
2018/08/27 Javascript
使用layer.msg 时间设置不起作用的解决方法
2019/09/12 Javascript
LRUCache的实现原理及利用python实现的方法
2017/11/21 Python
Python打印“菱形”星号代码方法
2018/02/05 Python
Python功能点实现:函数级/代码块级计时器
2019/01/02 Python
Python3如何实现Win10桌面自动切换
2020/08/11 Python
Python Pygame实现俄罗斯方块
2021/02/19 Python
美国婚礼和派对礼品网站:Kate Aspen(新娘送礼会、迎婴派对)
2018/03/28 全球购物
广州足迹信息技术有限公司Java软件工程师试题
2014/02/15 面试题
汉语专业应届生求职信
2013/10/01 职场文书
高校毕业生登记表自我鉴定
2013/11/03 职场文书
银行工作检查书范文
2014/01/31 职场文书
本科生导师推荐信范文
2014/05/18 职场文书
4s店活动策划方案
2014/08/25 职场文书
食品安全承诺书范文
2014/08/29 职场文书
党员教师学习党的群众路线教育实践活动心得体会
2014/10/31 职场文书
公务员年度考核个人总结
2015/02/12 职场文书
网络舆情信息简报
2015/07/21 职场文书
2016年小学中秋节活动总结
2016/04/05 职场文书
入党心得体会
2019/06/20 职场文书
实用干货:敬酒词大全,帮你应付各种场合
2019/11/21 职场文书
HTML中的表单元素介绍
2022/02/28 HTML / CSS