php中strtotime函数性能分析


Posted in PHP onNovember 20, 2016

最近在做一个游戏数据统计后台,最基础的功能是通过分析注册登录日志来展示用户数据。在公司内部测试,用户量很少,所以就没有发现什么性能问题。但是这两天一起放到真实的测试环境,用户量噌噌地就涌进来了,从下午开始,在线人数的统计开始卡,几秒钟才返回数据;注册人数的查询速度还行。到了晚上,在线人数的统计基本上就加载超时打不开了。虽然不知他们游戏端那边什么BUG,玩家那边登录经常出问题,导致在线人数和注册人数并不是很多。但是就这一点数据量我这边查询的速度也不行,这就很尴尬了。

现在他们那边在查游戏的BUG,我这边也在看统计后台的代码到底性能出在哪里。首先说明一下,我统计用的数据是从库,他们游戏用的是主库,再说我这边管理员人数就几个,不可能会影响到游戏服的性能问题。

今天项目组长把数据库都导过来到公司内的服务器。我拷了一份到本机,看看统计平台的性能问题出在哪里。然后却发现,居然连注册统计都非常卡,服务器上是两秒左右返回,本机要二十几秒,还经常超时(PHP的默认配置是30秒超时);在线统计的就不用说了肯定打不开。看了一下数据库,当天的注册记录也就 3500 条左右(有假数据),每五分钟统计一次,一天就是统计 288 次。当然这里肯定不是循环查询数据库288次,那样会被骂死的吧。

统计时间段内的注册数,逻辑也非常简单,就是每个时间段遍历一次数据,比较时间大小,符合就+1。但是为什么这么简单的逻辑,也就一百万次循环,怎么会跑出了足足半分钟的时间那么久呢?

关键问题就出在于 时间比较这里了,我们都知道,时间戳是比较时间大小的一个比较科学的方法,而数据库里记录的时间一般都是以 YYYY-mm-dd HH:ii:ss 的形式,PHP里有strtotime的函数转换成时间戳。然而在288个for * 3500个foreach 的加持之后,这里的执行时间长达半分钟。

$nowDayDT = strtotime( date('Y-m-d') );
$__startT = microtime(TRUE);
for($i=0; $i<$allTime; $i += $gapTime){
  $count = 0;
  //用于数据比较的
  $startDT = $nowDayDT+$i;
  $endDT = $nowDayDT+$i+$gapTime;
  //用于显示的
  $xAxis1 = date('H:i', $nowDayDT+$i);
  $xAxis2 = date('H:i', $nowDayDT+$i+$gapTime);

  foreach($rawData as $line){
    $time = strtotime($line['log_dt']);
    if( $startDT<=$time && $time<$endDT ){
      $count ++;
    }
  }
  $resArr[] = [
    'date'=>$xAxis1.'~'.$xAxis2,
    'number'=>$count
  ];
}
echo microtime(TRUE)-$__startT;

那这样的话,基本上是没办法再用这个strtotime的函数的了,那还有什么办法比较时间大小呢?答案很简单粗暴,PHP里面可以直接比较两个日期时间字符串!所以改过后的代码如下。然后现在的运行时间大概是 0.3秒

$__startT = microtime(TRUE);
for($i=0; $i<$allTime; $i += $gapTime){
  $count = 0;
  //用于数据比较的
  $startDT = date('Y-m-d H:i:s', $nowDayDT+$i);
  $endDT = date('Y-m-d H:i:s', $nowDayDT+$i+$gapTime);
  //用于显示的
  $xAxis1 = date('H:i', $nowDayDT+$i);
  $xAxis2 = date('H:i', $nowDayDT+$i+$gapTime);

  foreach($rawData as $line){
    $time = $line['log_dt'];
    if( $startDT<=$time && $time<$endDT ){
      $count ++;
    }
  }
  $resArr[] = [
    'date'=>$xAxis1.'~'.$xAxis2,
    'number'=>$count
  ];
}
echo microtime(TRUE)-$__startT;

遍历再优化

大家可能发现一个问题,for 里面嵌套一个 foreach,这性能有点担忧,其中里面的 foreach 有必要完全遍历吗?其实是不必的。只要查SQL数据的时候,按时间排序排出来。优化后的时间比较算法如下:

for{ ...
foreach($rawData as $line){
  $time = $line['log_dt'];//strtotime($line['log_dt']);
  //优化算法计算
  if($time<$startDT) continue;  //小于开始时间则跳过
  if($time>=$endDT) break;    //大于结束时间则结束
  $count ++;            //否则为符合条件
  //原始的算法
//  if( $startDT<=$time && $time<$endDT ){
//    $count ++;
//  }
}
...}

这里巧用了 continue 和 break 关键字,用于跳过一次循环和结束整个循环。这次的话,一天中刚开始的时间统计中,后面很大一部分数据的都可以直接跳过。最后总遍历时间缩短为约0.12秒 。

总结,在大型的数据处理中,应该尽量避免在遍历中进行数据的转换,避免用一些原理复杂的函数。如strtotime

PHP 相关文章推荐
php adodb介绍
Mar 19 PHP
php daodb插入、更新与删除数据
Mar 19 PHP
PHP 简单数组排序实现代码
Aug 05 PHP
Ajax PHP 边学边练 之三 数据库
Nov 26 PHP
php设计模式 Decorator(装饰模式)
Jun 26 PHP
解决PHP4.0 和 PHP5.0类构造函数的兼容问题
Aug 01 PHP
理解PHP中的stdClass类
Apr 18 PHP
PHP写的资源下载防盗链类分享
May 12 PHP
PHP curl CURLOPT_RETURNTRANSFER参数的作用使用实例
Feb 07 PHP
PHP使用mysql_fetch_row查询获得数据行列表的方法
Mar 18 PHP
PHP结合Mysql数据库实现留言板功能
Mar 04 PHP
php字符串的替换,分割和连接方法
May 23 PHP
php的socket编程详解
Nov 20 #PHP
PHP内置加密函数详解
Nov 20 #PHP
php PDO异常处理详解
Nov 20 #PHP
php.ini中date.timezone设置详解
Nov 20 #PHP
centos 7.2下搭建LNMP环境教程
Nov 20 #PHP
浅析php中array_map和array_walk的使用对比
Nov 20 #PHP
php解决DOM乱码的方法示例代码
Nov 20 #PHP
You might like
php 高性能书写
2010/12/11 PHP
php读取csv数据保存到数组的方法
2015/01/03 PHP
thinkPHP使用post方式查询时分页失效的解决方法
2015/12/09 PHP
CodeIgniter连贯操作的底层原理分析
2016/05/17 PHP
windows下的WAMP环境搭建图文教程(推荐)
2017/07/27 PHP
浅谈Laravel队列实现原理解决问题记录
2017/08/19 PHP
Laravel框架数据库迁移操作实例详解
2020/04/06 PHP
PHP加MySQL消息队列深入理解
2021/02/27 PHP
Google Map API更新实现用户自定义标注坐标
2009/07/29 Javascript
JQuery筛选器全系列介绍
2013/08/27 Javascript
对比分析json及XML
2014/11/28 Javascript
Lab.js初次使用笔记
2015/02/28 Javascript
JavaScript类型系统之布尔Boolean类型详解
2016/06/26 Javascript
前端防止用户重复提交js实现代码示例
2018/09/07 Javascript
分享5个顶级的JavaScript Ajax组件库
2018/09/16 Javascript
如何在微信小程序中存setStorage
2019/12/13 Javascript
使用Taro实现小程序商城的购物车功能模块的实例代码
2020/06/05 Javascript
JavaScript this指向相关原理及实例解析
2020/07/10 Javascript
基于Python __dict__与dir()的区别详解
2017/10/30 Python
Python实现图片滑动式验证识别方法
2017/11/09 Python
Python实现账号密码输错三次即锁定功能简单示例
2019/03/29 Python
Python3安装psycopy2以及遇到问题解决方法
2019/07/03 Python
Python 实例方法、类方法、静态方法的区别与作用
2019/08/14 Python
Python实现socket非阻塞通讯功能示例
2019/11/06 Python
解决Django响应JsonResponse返回json格式数据报错问题
2020/08/09 Python
JBL加拿大官方商店:扬声器、耳机等
2020/10/23 全球购物
中科软测试工程师面试题
2012/06/16 面试题
写好自荐信要注意的问题
2013/11/10 职场文书
班组长安全职责
2014/01/05 职场文书
咖啡厅创业计划书范本
2014/01/22 职场文书
纪检干部现实表现材料
2014/08/21 职场文书
2014年最新党员对照检查材料汇总
2014/09/15 职场文书
2015年全国助残日活动方案
2015/05/04 职场文书
交通事故被告答辩状
2015/05/22 职场文书
mysql使用 not int 子查询隐含陷阱
2022/04/12 MySQL
如何基于python实现单目三维重建详解
2022/06/25 Python