PHP优化之批量操作MySQL实例分析


Posted in PHP onApril 23, 2020

本文实例讲述了PHP优化之批量操作MySQL。分享给大家供大家参考,具体如下:

设计一个数据表如下:

create table optimization(
  id INT NOT NULL AUTO_INCREMENT,
  value VARCHAR(10) NOT NULL,
  PRIMARY KEY(id)
);

现在有一个业务需求需要批量插入数据。

先来看看下面这一段代码:

<?php
  $dsn = 'mysql:dbname=test;host=127.0.0.1';
  $user = 'root';
  $password = 'root';

  try {
    $dbh = new PDO($dsn, $user, $password);
  } catch(PDOException $e) {
    echo 'Connection failed: ' , $e->getMessage();
  }
  $begin = microtime(true) * 1000;

  $count = 100;
  $stmt = $dbh->prepare('INSERT INTO `optimization` (id, value) VALUES(:id, :value)');
  $stmt->bindParam(':id', $id);
  $stmt->bindParam(':value', $value);
  for ($i = 0; $i < $count; $i++)
  {
    $id = '';
    $value = $i;
    $stmt->execute();
  }

  $end = microtime(true) * 1000;
  echo 'excuted : ' , ($end - $begin) , ' ms';

经过测试,上面代码运行结果如下:

1、excuted : 7601.4348144531 ms

2、excuted : 7476.4270019531 ms

3、excuted : 7674.4387207031 ms

平均:7584.100179036433 ms

再来看看第二段代码:

<?php
  $dsn = 'mysql:dbname=test;host=127.0.0.1';
  $user = 'root';
  $password = 'root';

  try {
    $dbh = new PDO($dsn, $user, $password);
  } catch(PDOException $e) {
    echo 'Connection failed: ' , $e->getMessage();
  }

  $begin = microtime(true) * 1000;
  $dbh->beginTransaction();
  try {
    $count = 100;
    $sql = 'INSERT INTO `optimization` (id, value) VALUES ';
    $sql_arr = array();
    $sql_str = '';
    for ($i = 0; $i < $count; $i++)
    {
      $sql_arr[] = ("('', $i)");
    }
    $sql_str = implode(',', $sql_arr);
    $sql .= $sql_str;
    $stmt = $dbh->prepare($sql);
    $stmt->execute();
    $dbh->commit();
  } catch(Exception $e) {
    $dbh->rollBack();
    echo $e->getMessage() . '<br>';
  }

  $end = microtime(true) * 1000;
  echo 'excuted : ' , ($end - $begin) , ' ms';

上面这段代码的运行结果如下:

1、excuted : 99.005859375 ms

2、excuted : 103.00610351562 ms

3、excuted : 68.00390625 ms

平均:90.00528971354 ms

##分析 可以看出,在第二段代码中,使用了批量插入,此时的效率比第一段提高了84%。原因如下:

  • 使用第一段代码的时候,因为每一次循环里都执行了一个mysql语句,此时php需要与mysql获得连接,然后再执行mysql语句,然后再断开。这就是第一段代码最主要的时间开销?PHP与MySQL连接的网络传输IO
  • 第一段代码SQL语句解析的次数更多

因此,在第二段代码中,通过合并SQL语句来实现减少SQL语句解析的次数以及PHP与MySQL连接的次数来达到减少网络传输IO的开销。

注意: 1、SQL语句是有长度限制的,因此,在进行SQL语句合并时务必不能超过SQL长度限制,通过设置max_allowed_packet可以修改,默认是1M,测试时修改为8M。

##总结

在进行对数据库的批量操作(如:插入、更新、修改)时,应当尽可能将SQL语句合并后再执行而不是在循环中依次执行。

记录下最近在项目中犯下的一个比较大的错误,以后不能再犯了。以前一直都没有注意到,直到现在真正参与到企业项目中,自己的代码被老大指出错误后才发现自己的错误。学习了。

希望本文所述对大家PHP程序设计有所帮助。

PHP 相关文章推荐
AJAX的跨域访问-两种有效的解决方法介绍
Jun 22 PHP
浅析51个PHP处理字符串的函数
Aug 02 PHP
php绘图之在图片上写中文和英文的方法
Jan 24 PHP
PHP使用mysql_fetch_object从查询结果中获取对象集的方法
Mar 18 PHP
php项目中百度 UEditor 简单安装调试和调用
Jul 15 PHP
smarty中常用方法实例总结
Aug 07 PHP
Symfony核心类概述
Mar 17 PHP
php 计算两个时间相差的天数、小时数、分钟数、秒数详解及实例代码
Nov 09 PHP
php+ajax简单实现全选删除的方法
Dec 06 PHP
关于ThinkPHP中的异常处理详解
May 11 PHP
PHP实现读取文件夹及批量重命名文件操作示例
Apr 15 PHP
如何在PHP环境中使用ProtoBuf数据格式
Jun 19 PHP
Thinkphp 框架扩展之Widget扩展实现方法分析
Apr 23 #PHP
Thinkphp 框架扩展之行为扩展原理与实现方法分析
Apr 23 #PHP
Thinkphp 框架扩展之标签库驱动原理与用法分析
Apr 23 #PHP
Thinkphp 框架扩展之数据库驱动常用方法小结
Apr 23 #PHP
Thinkphp 框架扩展之类库扩展操作详解
Apr 23 #PHP
TP框架实现上传一张图片和批量上传图片的方法分析
Apr 23 #PHP
php实现将数组或对象写入到文件的方法小结【三种方法】
Apr 22 #PHP
You might like
php使用PDO操作MySQL数据库实例
2014/12/30 PHP
php对文件夹进行相关操作(遍历、计算大小)
2015/11/04 PHP
CakePHP框架Session设置方法分析
2017/02/23 PHP
PHP基于curl实现模拟微信浏览器打开微信链接的方法示例
2019/02/15 PHP
用prototype实现的简单小巧的多级联动菜单
2007/03/24 Javascript
jquery的Theme和Theme Switcher使用小结
2010/09/08 Javascript
js写一个弹出层并锁屏效果实现代码
2012/12/07 Javascript
javascript 全选与全取消功能的实现代码
2012/12/23 Javascript
jquery获取iframe中的dom对象(两种方法)
2013/07/02 Javascript
把文本中的URL地址转换为可点击链接的JavaScript、PHP自定义函数
2014/07/29 Javascript
js文件包含的几种方式介绍
2014/09/28 Javascript
20条学习javascript的编程规范的建议
2014/11/28 Javascript
jQuery新窗口打开外链接
2016/07/21 Javascript
jQuery和JavaScript节点插入元素的方法对比
2016/11/18 Javascript
JS判断是否手机或pad访问实现方法
2016/12/09 Javascript
javascript中递归的两种写法
2017/01/17 Javascript
Angular 2父子组件数据传递之@Input和@Output详解 (上)
2017/07/05 Javascript
js实现移动端导航点击自动滑动效果
2017/07/18 Javascript
详解如何写出一个利于扩展的vue路由配置
2019/05/16 Javascript
jquery实现下载图片功能
2019/07/18 jQuery
Python生成随机密码的方法
2017/06/16 Python
Python安装图文教程 Pycharm安装教程
2018/03/27 Python
用python3 返回鼠标位置的实现方法(带界面)
2019/07/05 Python
python生成特定分布数的实例
2019/12/05 Python
python 爬取B站原视频的实例代码
2020/09/09 Python
使用html5+css3来实现slider切换效果告别javascript+css
2013/01/08 HTML / CSS
html5的画布canvas——画出弧线、旋转的图形实例代码+效果图
2013/06/09 HTML / CSS
John Varvatos官方网站:设计师男士时装
2017/02/08 全球购物
Chi Chi London官网:购买连衣裙和礼服
2020/10/25 全球购物
Oracle快照(snapshot)
2015/03/13 面试题
药剂专业自荐书
2014/06/20 职场文书
群众路线教育实践活动剖析材料
2014/09/30 职场文书
免职通知
2015/04/23 职场文书
家长会感言
2015/08/01 职场文书
MySQL中的全表扫描和索引树扫描
2022/05/15 MySQL
Python自动操作神器PyAutoGUI的使用教程
2022/06/16 Python