php中strtotime函数性能分析


Posted in PHP onNovember 20, 2016

最近在做一个游戏数据统计后台,最基础的功能是通过分析注册登录日志来展示用户数据。在公司内部测试,用户量很少,所以就没有发现什么性能问题。但是这两天一起放到真实的测试环境,用户量噌噌地就涌进来了,从下午开始,在线人数的统计开始卡,几秒钟才返回数据;注册人数的查询速度还行。到了晚上,在线人数的统计基本上就加载超时打不开了。虽然不知他们游戏端那边什么BUG,玩家那边登录经常出问题,导致在线人数和注册人数并不是很多。但是就这一点数据量我这边查询的速度也不行,这就很尴尬了。

现在他们那边在查游戏的BUG,我这边也在看统计后台的代码到底性能出在哪里。首先说明一下,我统计用的数据是从库,他们游戏用的是主库,再说我这边管理员人数就几个,不可能会影响到游戏服的性能问题。

今天项目组长把数据库都导过来到公司内的服务器。我拷了一份到本机,看看统计平台的性能问题出在哪里。然后却发现,居然连注册统计都非常卡,服务器上是两秒左右返回,本机要二十几秒,还经常超时(PHP的默认配置是30秒超时);在线统计的就不用说了肯定打不开。看了一下数据库,当天的注册记录也就 3500 条左右(有假数据),每五分钟统计一次,一天就是统计 288 次。当然这里肯定不是循环查询数据库288次,那样会被骂死的吧。

统计时间段内的注册数,逻辑也非常简单,就是每个时间段遍历一次数据,比较时间大小,符合就+1。但是为什么这么简单的逻辑,也就一百万次循环,怎么会跑出了足足半分钟的时间那么久呢?

关键问题就出在于 时间比较这里了,我们都知道,时间戳是比较时间大小的一个比较科学的方法,而数据库里记录的时间一般都是以 YYYY-mm-dd HH:ii:ss 的形式,PHP里有strtotime的函数转换成时间戳。然而在288个for * 3500个foreach 的加持之后,这里的执行时间长达半分钟。

$nowDayDT = strtotime( date('Y-m-d') );
$__startT = microtime(TRUE);
for($i=0; $i<$allTime; $i += $gapTime){
  $count = 0;
  //用于数据比较的
  $startDT = $nowDayDT+$i;
  $endDT = $nowDayDT+$i+$gapTime;
  //用于显示的
  $xAxis1 = date('H:i', $nowDayDT+$i);
  $xAxis2 = date('H:i', $nowDayDT+$i+$gapTime);

  foreach($rawData as $line){
    $time = strtotime($line['log_dt']);
    if( $startDT<=$time && $time<$endDT ){
      $count ++;
    }
  }
  $resArr[] = [
    'date'=>$xAxis1.'~'.$xAxis2,
    'number'=>$count
  ];
}
echo microtime(TRUE)-$__startT;

那这样的话,基本上是没办法再用这个strtotime的函数的了,那还有什么办法比较时间大小呢?答案很简单粗暴,PHP里面可以直接比较两个日期时间字符串!所以改过后的代码如下。然后现在的运行时间大概是 0.3秒

$__startT = microtime(TRUE);
for($i=0; $i<$allTime; $i += $gapTime){
  $count = 0;
  //用于数据比较的
  $startDT = date('Y-m-d H:i:s', $nowDayDT+$i);
  $endDT = date('Y-m-d H:i:s', $nowDayDT+$i+$gapTime);
  //用于显示的
  $xAxis1 = date('H:i', $nowDayDT+$i);
  $xAxis2 = date('H:i', $nowDayDT+$i+$gapTime);

  foreach($rawData as $line){
    $time = $line['log_dt'];
    if( $startDT<=$time && $time<$endDT ){
      $count ++;
    }
  }
  $resArr[] = [
    'date'=>$xAxis1.'~'.$xAxis2,
    'number'=>$count
  ];
}
echo microtime(TRUE)-$__startT;

遍历再优化

大家可能发现一个问题,for 里面嵌套一个 foreach,这性能有点担忧,其中里面的 foreach 有必要完全遍历吗?其实是不必的。只要查SQL数据的时候,按时间排序排出来。优化后的时间比较算法如下:

for{ ...
foreach($rawData as $line){
  $time = $line['log_dt'];//strtotime($line['log_dt']);
  //优化算法计算
  if($time<$startDT) continue;  //小于开始时间则跳过
  if($time>=$endDT) break;    //大于结束时间则结束
  $count ++;            //否则为符合条件
  //原始的算法
//  if( $startDT<=$time && $time<$endDT ){
//    $count ++;
//  }
}
...}

这里巧用了 continue 和 break 关键字,用于跳过一次循环和结束整个循环。这次的话,一天中刚开始的时间统计中,后面很大一部分数据的都可以直接跳过。最后总遍历时间缩短为约0.12秒 。

总结,在大型的数据处理中,应该尽量避免在遍历中进行数据的转换,避免用一些原理复杂的函数。如strtotime

PHP 相关文章推荐
PHP函数utf8转gb2312编码
Dec 21 PHP
PHP pathinfo()获得文件的路径、名称等信息说明
Sep 13 PHP
php开发留言板的CRUD(增,删,改,查)操作
Apr 19 PHP
PHP操作MongoDB GridFS 存储文件的详解
Jun 20 PHP
带密匙的php加密解密示例分享
Jan 29 PHP
Codeigniter发送邮件的方法
Mar 19 PHP
Laravel中Trait的用法实例详解
Mar 16 PHP
详解yii2使用多个数据库的案例
Jun 16 PHP
Laravel 5.4因特殊字段太长导致migrations报错的解决
Oct 22 PHP
PHP CURL与java http使用方法详解
Jan 26 PHP
thinkPHP+mysql+ajax实现的仿百度一下即时搜索效果详解
Jul 15 PHP
PHP dirname功能及原理实例解析
Oct 28 PHP
php的socket编程详解
Nov 20 #PHP
PHP内置加密函数详解
Nov 20 #PHP
php PDO异常处理详解
Nov 20 #PHP
php.ini中date.timezone设置详解
Nov 20 #PHP
centos 7.2下搭建LNMP环境教程
Nov 20 #PHP
浅析php中array_map和array_walk的使用对比
Nov 20 #PHP
php解决DOM乱码的方法示例代码
Nov 20 #PHP
You might like
德生PL550的电路分析
2021/03/02 无线电
smarty的保留变量问题
2008/10/23 PHP
PHP操作xml代码
2010/06/17 PHP
php使用正则表达式提取字符串中尖括号、小括号、中括号、大括号中的字符串
2020/04/05 PHP
为PHP安装imagick时出现Cannot locate header file MagickWand.h错误的解决方法
2014/11/03 PHP
PHP多线程类及用法实例
2014/12/03 PHP
动态的绑定事件addEventListener方法的使用
2014/01/24 Javascript
javascript实现图片自动和可控的轮播切换特效
2015/04/13 Javascript
基于jquery实现简单的手风琴特效
2015/11/24 Javascript
浅析JS动态创建元素【两种方法】
2016/04/20 Javascript
利用原生JS自动生成文章标题树的实例
2016/08/22 Javascript
关于微信上网页图片点击全屏放大效果
2016/12/19 Javascript
让div运动起来 js实现缓动效果
2017/07/06 Javascript
vue-cli项目优化方法- 缩短首屏加载时间
2018/04/01 Javascript
vue源码解析之事件机制原理
2018/04/21 Javascript
js 计算图片内点个数的示例代码
2019/04/04 Javascript
vue实现输入框自动跳转功能
2020/05/20 Javascript
Python 创建子进程模块subprocess详解
2015/04/08 Python
Tensorflow卷积神经网络实例
2018/05/24 Python
什么是Python变量作用域
2020/06/03 Python
无需压缩软件,用python帮你操作压缩包
2020/08/17 Python
Pycharm创建文件时自动生成文件头注释(自定义设置作者日期)
2020/11/24 Python
德国专业木制品经销商:Holz-Direkt24
2019/12/26 全球购物
如何设置Java的运行环境
2013/04/05 面试题
Sql面试题
2013/03/20 面试题
阿里巴巴Oracle DBA笔试题答案-备份恢复类
2013/11/20 面试题
查环查孕证明
2014/01/10 职场文书
应届毕业生简历自我评价
2014/01/31 职场文书
信息管理与信息系统专业求职信
2014/06/21 职场文书
法语专业求职信
2014/07/20 职场文书
高中生学习计划书
2014/09/15 职场文书
2016春季小学开学寄语
2015/12/03 职场文书
小学英语听课心得体会
2016/01/14 职场文书
爱心捐款倡议书:点燃希望,传递温暖
2019/11/04 职场文书
Pandas加速代码之避免使用for循环
2021/05/30 Python
解决Laravel使用验证时跳转到首页的问题
2021/11/17 PHP