PHP 中执行排序与 MySQL 中排序


Posted in PHP onApril 21, 2009

此文首发在 InfoQ 中文站作者:明灵(dragon) , Fenng . Note:要转载的朋友请注意注明这篇文章的第一作者!
这篇文章是dragon 朋友来邮探讨后他做的一个总结。在 DB 中排序还是在 应用程序中排序是个很有趣的话题,dragon 第一份邮件中其实已经总结的很好了,我添加了一点建议而已。现在放上来,与大家共享。这篇文章也投稿到了 InfoQ 中文站

Q:列出在 PHP 中执行排序要优于在 MYSQL 中排序的原因?给一些必须在MYSQL中排序的实例?

A:通常来说,执行效率需要考虑 CPU、内存和硬盘等的负载情况,假定 MYSQL 服务器和 PHP 的服务器都已经按照最适合的方式来配置,那么系统的可伸缩性(Scalability)和用户感知性能(User-perceived Performance)是我们追求的主要目标。在实际运行中,MYSQL 中数据往往以 HASH tables、BTREE 等方式存贮于内存,操作速度很快;同时 INDEX 已经进行了一些预排序;很多应用中,MYSQL 排序是首选。而在应用层(PHP)中排序,也必然在内存中进行,与 MYSQL 相比具有如下优势:

  • 1、 考虑整个网站的可伸缩性和整体性能,在应用层(PHP)中排序明显会降低数据库的负载,从而提升整个网站的扩展能力。而数据库的排序,实际上成本是非常高的,消耗内存、CPU,如果并发的排序很多,DB 很容易到瓶颈。
  • 2、 如果在应用层(PHP)和MYSQL之间还存在数据中间层,合理利用,PHP会有更好的收益。
  • 3、 PHP在内存中的数据结构专门针对具体应用来设计,比数据库更为简洁、高效;
  • 4、 PHP不用考虑数据灾难恢复问题,可以减少这部分的操作损耗;
  • 5、 PHP不存在表的锁定问题;
  • 6、 MYSQL中排序,请求和结果返回还需要通过网络连接来进行,而PHP中排序之后就可以直接返回了,减少了网络IO。

至于执行速度,差异应该不会很大,除非应用设计有问题,造成大量不必要的网络IO。另外,应用层要注意PHP 的 Cache 设置,如果超出会报告内部错误;此时要根据应用做好评估,或者调整Cache。具体选择,将取决于具体的应用。

列出一些 PHP 中执行排序更优的情况:

  • 1、 数据源不在 MYSQL 中,存在硬盘、内存或者来自网络的请求等;
  • 2、 数据存在 MYSQL 中,量不大,而且没有相应的索引,此时把数据取出来用PHP排序更快;
  • 3、 数据源来自于多个 MYSQL 服务器,此时从多个 MYSQL 中取出数据,然后在PHP中排序更快;
  • 4、 除了 MYSQL 之外,存在其他数据源,比如硬盘、内存或者来自网络的请求等,此时不适合把这些数据存入 MYSQL 后再排序;

列出一些必须在 MYSQL 中排序的实例:

  • 1、 MYSQL 中已经存在这个排序的索引;
  • 2、 MYSQL 中数据量较大,而结果集需要其中很小的一个子集;比如 1000000 行数据,取TOP 10;
  • 3、 对于一次排序、多次调用的情况,比如统计聚合的情形,可以提供给不同的服务使用,那么在 MYSQL 中排序是首选的。另外,对于数据深度挖掘,通常做法是在应用层做完排序等复杂操作,把结果存入MYSQL即可,便于多次使用。
  • 4、 不论数据源来自哪里,当数据量大到一定的规模后,由于占用内存/Cache 的关系,不再适合 PHP 中排序了;此时把数据复制、导入或者存在 MYSQL ,并用 INDEX 优化,是优于 PHP 的。不过,用 Java,甚至 C++ 来处理这类操作会更好。 [有些类似大数据集聚合或者汇总的数据,在客户端排序得不偿失。当然,也有用类似搜索引擎的思路来解决类似应用的情况。]

从网站整体考虑,就必须加入人力和成本的考虑。假如网站规模和负载较小,而人力有限(人数和能力都可能有限),此时在应用层(PHP)做排序要做不 少开发和调试工作,耗费时间,得不偿失;不如在 DB 中处理,简单快速。对于大规模的网站,电力、服务器的费用很高,在系统架构上精打细算,可以节约大量的费用,是公司持续发展之必要;此时如果能在应用层(PHP) 进行排序并满足业务需求,尽量在应用层进行。

PHP 相关文章推荐
?繁体转换的class
Oct 09 PHP
解析:通过php socket并借助telnet实现简单的聊天程序
Jun 18 PHP
orm获取关联表里的属性值
Apr 17 PHP
CI框架简单邮件发送类实例
May 18 PHP
php实现的debug log日志操作类实例
Jul 12 PHP
php文件上传、下载和删除示例
Aug 28 PHP
php版阿里大于(阿里大鱼)短信发送实例详解
Nov 30 PHP
PHP开发APP端微信支付功能
Feb 17 PHP
PHP 传输会话curl函数的实例详解
Sep 12 PHP
Mac M1安装mnmp (Mac+Nginx+MySQL+PHP) 开发环境
Mar 29 PHP
php 获取音视频时长,PHP 利用getid3 获取音频文件时长等数据
Apr 01 PHP
php7中停止php-fpm服务的方法详解
May 09 PHP
一个php导出oracle库的php代码
Apr 20 #PHP
php一句话cmdshell新型 (非一句话木马)
Apr 18 #PHP
对squid中refresh_pattern的一些理解和建议
Apr 17 #PHP
PHP 加密与解密的斗争
Apr 17 #PHP
php error_log 函数的使用
Apr 13 #PHP
PHP Document 代码注释规范
Apr 13 #PHP
php pcntl_fork和pcntl_fork 的用法
Apr 13 #PHP
You might like
DOTA2游戏同人动画《龙之血》导演接受采访
2021/03/05 欧美动漫
php下防止单引号,双引号在接受页面转义的设置方法
2008/09/25 PHP
用PHP将数据导入到Foxmail的实现代码
2010/09/05 PHP
PHP简单字符串过滤方法示例
2016/09/04 PHP
JavaScript 在各个浏览器中执行的耐性
2009/04/06 Javascript
基于jQuery选择器的整理集合
2013/04/26 Javascript
JavaScript字符串对象substring方法入门实例(用于截取字符串)
2014/10/17 Javascript
node.js中的events.emitter.removeListener方法使用说明
2014/12/10 Javascript
jQuery通过Ajax返回JSON数据
2015/04/28 Javascript
JS获取CSS样式(style/getComputedStyle/currentStyle)
2016/01/19 Javascript
基于vue+ bootstrap实现图片上传图片展示功能
2017/05/17 Javascript
angular2系列之路由转场动画的示例代码
2017/11/09 Javascript
JS实现获取进今年第几天是周几的方法分析
2018/06/27 Javascript
JavaScript字符串转数字的5种方法及遇到的坑
2018/07/16 Javascript
vue 利用路由守卫判断是否登录的方法
2018/09/29 Javascript
vue 实现一个简单的全局调用弹窗案例
2020/09/10 Javascript
[13:39]2014 DOTA2华西杯精英邀请赛 5 25 NewBee VS DK第一场
2014/05/26 DOTA
[09:33]2015国际邀请赛第四日TOP10
2015/08/08 DOTA
利用Python进行异常值分析实例代码
2017/12/07 Python
python实现批量解析邮件并下载附件
2018/06/19 Python
python图形开发GUI库pyqt5的详细使用方法及各控件的属性与方法
2020/02/14 Python
pandas和spark dataframe互相转换实例详解
2020/02/18 Python
详解python 条件语句和while循环的实例代码
2020/12/28 Python
如何利用CSS3制作3D效果文字具体实现样式
2013/05/02 HTML / CSS
美国最大的袜子制造商和零售商:Renfro Socks
2017/09/03 全球购物
英国灯具和灯泡网上商店:Lights.co.uk
2018/02/02 全球购物
什么是WEB控件?使用WEB控件有哪些优势?
2012/01/21 面试题
浙江文明网签名寄语
2014/01/18 职场文书
学生党员的自我评价范文
2014/03/01 职场文书
生产部厂长职位说明书
2014/03/03 职场文书
党支部评议意见
2015/06/02 职场文书
初中英语教师个人工作总结2015
2015/07/21 职场文书
校运会加油稿大全
2015/07/22 职场文书
乡镇司法所2015年度工作总结
2015/10/14 职场文书
党风廉洁教育心得体会
2016/01/20 职场文书
详解Python中下划线的5种含义
2021/07/15 Python