PHP读取大文件的类SplFileObject使用介绍


Posted in PHP onApril 09, 2014

如果加载的文件特别大时,如几百M,上G时,这时性能就降下来了,那么PHP里有没有对大文件的处理函数或者类呢? 答案是:有的。
PHP真的越来越“面向对象”了,一些原有的基础的SPL方法都开始陆续地实现出class了。
从 PHP 5.1.0 开始,SPL 库增加了 SplFileObject 与 SplFileInfo 两个标准的文件操作类。SplFileInfo 是从 PHP 5.1.2 开始实现的。
从字面意思理解看,可以看出 SplFileObject 要比 SplFileInfo 更为强大。
不错,SplFileInfo 仅用于获取文件的一些属性信息,如文件大小、文件访问时间、文件修改时间、后缀名等值,而 SplFileObject 是继承 SplFileInfo 这些功能的。
 

/** 返回文件从X行到Y行的内容(支持php5、php4)  
 * @param string $filename 文件名
 * @param int $startLine 开始的行数
 * @param int $endLine 结束的行数
 * @return string
 */
function getFileLines($filename, $startLine = 1, $endLine=50, $method='rb') {
    $content = array();
    $count = $endLine - $startLine;  
    // 判断php版本(因为要用到SplFileObject,PHP>=5.1.0)
    if(version_compare(PHP_VERSION, '5.1.0', '>=')){
        $fp = new SplFileObject($filename, $method);
        $fp->seek($startLine-1);// 转到第N行, seek方法参数从0开始计数
        for($i = 0; $i <= $count; ++$i) {
            $content[]=$fp->current();// current()获取当前行内容
            $fp->next();// 下一行
        }
    }else{//PHP<5.1
        $fp = fopen($filename, $method);
        if(!$fp) return 'error:can not read file';
        for ($i=1;$i<$startLine;++$i) {// 跳过前$startLine行
            fgets($fp);
        }
        for($i;$i<=$endLine;++$i){
            $content[]=fgets($fp);// 读取文件行内容
        }
        fclose($fp);
    }
    return array_filter($content); // array_filter过滤:false,null,''
}
   
Ps: 上面都没加”读取到末尾的判断”:!$fp->eof() 或者 !feof($fp),加上这个判断影响效率,自己加上测试很多很多很多行的运行时间就晓得了,而且这里加上也完全没必要。
从上面的函数就可以看出来使用SplFileObject比下面的fgets要快多了,特别是文件行数非常多、并且要取后面的内容的时候。fgets要两个循环才可以,并且要循环$endLine次。
此方法花了不少功夫,测试了很多中写法,就是想得出效率最高的方法。哪位觉得有值得改进的欢迎赐教。
使用,返回35270行-35280行的内容:
echo '<pre>';
var_dump(getFileLines('test.php',35270,35280));
echo '</pre>'; 
PHP 相关文章推荐
第四节--构造函数和析构函数
Nov 16 PHP
PHP计划任务之关闭浏览器后仍然继续执行的函数
Jul 22 PHP
深入探讨<br />和 \r\n两者有什么区别??
Jun 05 PHP
深入理解:单一入口、MVC、ORM、CURD、ActiveRecord概念
Jun 06 PHP
JS异常处理try..catch语句的作用和实例
May 05 PHP
linux下编译安装memcached服务
Aug 03 PHP
PHP中的常见魔术方法功能作用及用法实例
Jul 01 PHP
php封装的smarty类完整实例
Oct 19 PHP
基于php(Thinkphp)+jquery 实现ajax多选反选不选删除数据功能
Feb 24 PHP
深入理解Yii2.0乐观锁与悲观锁的原理与使用
Jul 26 PHP
基于Laravel实现的用户动态模块开发
Sep 21 PHP
php与阿里云短信接口接入操作案例分析
May 27 PHP
php解决约瑟夫环示例
Apr 09 #PHP
适用于抽奖程序、随机广告的PHP概率算法实例
Apr 09 #PHP
PHP父类调用子类方法的代码例子
Apr 09 #PHP
一个基于phpQuery的php通用采集类分享
Apr 09 #PHP
免费的ip数据库淘宝IP地址库简介和PHP调用实例
Apr 08 #PHP
2个自定义的PHP in_array 函数,解决大量数据判断in_array的效率问题
Apr 08 #PHP
PHP设计模式之观察者模式(Observer)详细介绍和代码实例
Apr 08 #PHP
You might like
高亮度显示php源代码
2006/10/09 PHP
KindEditor在php环境下上传图片功能集成的方法示例
2020/07/20 PHP
ECMAScript5中的对象存取器属性:getter和setter介绍
2014/12/08 Javascript
jQuery中animate用法实例分析
2015/03/09 Javascript
Javascript中匿名函数的调用与写法实例详解(多种)
2016/01/26 Javascript
javascript实现在网页中运行本地程序的方法
2016/02/03 Javascript
JavaScript实现数据类型的相互转换
2016/03/06 Javascript
artDialog+plupload实现多文件上传
2016/07/19 Javascript
js中利用cookie实现记住密码功能
2020/08/20 Javascript
JS实现倒计时(天数、时、分、秒)
2016/11/16 Javascript
AngularJS模仿Form表单提交的实现代码
2016/12/08 Javascript
js判断是否是手机页面
2017/03/17 Javascript
详解react-native WebView 返回处理(非回调方法可解决)
2018/02/27 Javascript
微信小程序实现注册登录功能(表单校验、错误提示)
2019/12/10 Javascript
JQuery通过键盘控制键盘按下与松开触发事件
2020/08/07 jQuery
python计算书页码的统计数字问题实例
2014/09/26 Python
python中正则的使用指南
2016/12/04 Python
python操作excel的包(openpyxl、xlsxwriter)
2018/06/11 Python
Python 获取div标签中的文字实例
2018/12/20 Python
基于python生成器封装的协程类
2019/03/20 Python
基于python实现高速视频传输程序
2019/05/05 Python
浅谈PySpark SQL 相关知识介绍
2019/06/14 Python
详解python播放音频的三种方法
2019/09/23 Python
python GUI库图形界面开发之pyinstaller打包python程序为exe安装文件
2020/02/26 Python
Python loguru日志库之高效输出控制台日志和日志记录
2020/03/07 Python
Keras Convolution1D与Convolution2D区别说明
2020/05/22 Python
Python3以GitHub为例来实现模拟登录和爬取的实例讲解
2020/07/30 Python
Python3读写ini配置文件的示例
2020/11/06 Python
英国花园药房: The Garden Pharmacy
2017/12/28 全球购物
一套Delphi的笔试题二
2013/05/11 面试题
电信专业应届生自荐信
2013/09/28 职场文书
就业自荐书
2013/12/05 职场文书
可口可乐广告词
2014/03/20 职场文书
副乡长民主生活会个人对照检查材料思想汇报
2014/10/01 职场文书
2016北大自主招生自荐信模板
2016/01/28 职场文书
创业项目大全(适合在家创业的项目)
2019/08/15 职场文书