PHP使用pcntl_fork实现多进程下载图片的方法


Posted in PHP onDecember 16, 2014

本文实例讲述了PHP使用pcntl_fork实现多进程下载图片的方法。分享给大家供大家参考。具体分析如下:

PHP pcntl_fork — 在当前进程当前位置产生分支,子进程,译注:fork是创建了一个子进程,父进程和子进程 都从fork的位置开始向下继续执行,不同的是父进程执行过程中,得到的fork返回值为子进程号,而子进程得到的是0.

注意:PHP有个pcntl_fork的函数可以实现多进程,但要加载pcntl拓展,而且只有在linux下才能编译这个拓展.

1.首先在ubuntu下编译pcntl.so,我的ubuntu下找不到pcntl的包,于是创建一个文件夹下载了整个PHP包,在里面找到了pcntl包运行如下命令,代码如下:

# mkdir php 

# cd php 

# apt-get source php5 

# cd php5-(WHATEVER_RELEASE)/ext/pcntl 

# phpize 

# ./configure (注一) 

# make 

# make install phpize 命令是用来准备 PHP 外挂模块的编译环境的

成功的安装将建立 extname.so 并放置于 PHP 的外挂模块目录中(预设存放于 /usr/lib/php/modules/ 内),需要调整 php.ini,加入 extension=extname.so 这一行之后才能使用此外挂模块.

例:

void pcntl_exec(string $path [,array $args [,array $envs ]])

pcntl_exec — 在当前进程空间执行指定程序,代码如下:

$cmds=array( 

        array('/home/jerry/projects/www/test2.php'), 

        array('/home/jerry/projects/www/test3.php') 

); 

 

foreach($cmds as $cmd){ 

        $pid=pcntl_fork(); 

        if($pid==-1){ 

        //进程创建失败 

            echo '创建子进程失败时返回-1'; 

            exit(-1); 

        } 

        else if($pid){ 

        //父进程会得到子进程号,所以这里是父进程执行的逻辑 

            pcntl_wait($status,WNOHANG); 

        } 

        else{ 

        //子进程处理逻辑 

            sleep(5); 

            pcntl_exec('/usr/bin/php',$cmd); 

            exit(0); 

        } 

}

例,实例多图片同步下载,代码如下:
#!/usr/bin/php 

<?php 

// 需要抓取的网页地址 

$url = 'https://3water.com'; 

$content = file_get_contents($url); 

preg_match_all('/<imgs+src="(.*?)"/', $content, $matches,PREG_SET_ORDER); 

echo "已发现".count($matches)."张图片n"; 

 

list($sm, $ss) = explode(" ", microtime()); 

foreach ($matches as $k => $val) 

{ 

 $pid[$k] = pcntl_fork(); 

 if(!$pid[$k]) 

 { 

  download($url, $val); 

  // 子进程要exit否则会进行递归多进程,父进程不要exit否则终止多进程 

  exit(0); 

 } 

 

 if ($pid[$k]) 

 { 

//    pcntl_waitpid($pid[$k], $status, WUNTRACED); 

 } 

 

} 

echo "下载完成n"; 

 

list($em, $es) = explode(" ", microtime()); 

 

echo "用时:",($es+$em) - ($ss + $sm),"n"; 

/** 

 * 抓取网页图片 

 *  

 */ 

function download($url, $val) 

{ 

 $pic_url = $val[1]; 

 if (strpos($val[1], '//') !== false) 

 { 

  ; 

 } 

 elseif (preg_match('@^(.*?)/@', $val[1], $inner_matches) == 0) 

 { 

  $pic_url = $url.$val[1]; 

 } 

 elseif (preg_match('@[:.]@', $inner_matches[1], $tmp_matches) == 0) 

 { 

  $pic_url = $url.$val[1]; 

 } 

 

 $pic = file_get_contents($pic_url); 

 

 if ($pic === false) 

 { 

  return; 

 } 

 

 preg_match('@/([^/]+)$@', $pic_url, $tmp_matches); 

 // 可使用assert处理异常 

 $pic_file_name = $tmp_matches[1]; 

 $f = fopen("tmp/".$pic_file_name, "wb"); # 

 fwrite($f, $pic); 

 fclose($f); 

} 

 

/* End of file pcntl_fork.php */ 

?>

希望本文所述对大家的PHP程序设计有所帮助。

PHP 相关文章推荐
php 获得汉字拼音首字母的函数
Aug 01 PHP
PHPThumb PHP 图片缩略图库
Mar 11 PHP
PHP 第一节 php简介
Apr 28 PHP
PHP中使用虚代理实现延迟加载技术
Nov 05 PHP
浅谈PHP中foreach/in_array的使用
Nov 02 PHP
php制作的简单验证码识别代码
Jan 26 PHP
ThinkPHP中Common/common.php文件常用函数功能分析
May 20 PHP
php分页查询的简单实现代码
Mar 14 PHP
使用Codeigniter重写insert的方法(推荐)
Mar 23 PHP
使用PHPWord生成word文档的方法详解
Jun 06 PHP
Laravel5.1 框架数据库操作DB运行原生SQL的方法分析
Jan 07 PHP
laravel框架路由分组,中间件,命名空间,子域名,路由前缀实例分析
Feb 18 PHP
php中最简单的字符串匹配算法
Dec 16 #PHP
PHP实现将科学计数法转换为原始数字字符串的方法
Dec 16 #PHP
php输出金字塔的2种实现方法
Dec 16 #PHP
smarty缓存用法分析
Dec 16 #PHP
yii2.0之GridView自定义按钮和链接用法
Dec 15 #PHP
smarty表格换行实例
Dec 15 #PHP
PHP使用xmllint命令处理xml与html的方法
Dec 15 #PHP
You might like
PHP 中执行系统外部命令
2006/10/09 PHP
JQuery 构建客户/服务分离的链接模型中Table中的排序分析
2010/01/22 Javascript
jQuery选中select控件 无法设置selected的解决方法
2010/09/01 Javascript
jQuery EasyUI API 中文文档 - Parser 解析器
2011/09/29 Javascript
jqGrid用法汇总(全经典)
2016/06/28 Javascript
js 自带的 map() 方法全面了解
2016/08/16 Javascript
老生常谈javascript变量的命名规范和注释
2016/09/29 Javascript
jQuery中页面返回顶部的方法总结
2016/12/30 Javascript
JavaScript如何一次性展示几万条数据
2017/03/30 Javascript
二维码图片生成器QRCode.js简单介绍
2017/08/18 Javascript
基于angular-utils-ui-breadcrumbs使用心得(分享)
2017/11/03 Javascript
AngularJS与后端php的数据交互方法
2018/08/13 Javascript
在AngularJs中设置请求头信息(headers)的方法及不同方法的比较
2018/09/04 Javascript
用vue-cli开发vue时的代理设置方法
2018/09/20 Javascript
Vue项目部署在Spring Boot出现页面空白问题的解决方案
2018/11/26 Javascript
vue实现文字横向无缝走马灯组件效果的实例代码
2019/04/09 Javascript
Nodejs异步流程框架async的方法
2019/06/07 NodeJs
p5.js码绘“跳动的小正方形”的实现代码
2019/10/22 Javascript
[07:48]DOTA2上海特级锦标赛主赛事首日RECAP
2016/03/04 DOTA
Python中的条件判断语句基础学习教程
2016/02/07 Python
Python实现的简单dns查询功能示例
2017/05/24 Python
Python 逐行分割大txt文件的方法
2017/10/10 Python
python正则表达式及使用正则表达式的例子
2018/01/22 Python
利用python打开摄像头及颜色检测方法
2018/08/03 Python
Python多线程爬取豆瓣影评API接口
2019/10/22 Python
详解python 破解网站反爬虫的两种简单方法
2020/02/09 Python
python名片管理系统开发
2020/06/18 Python
职业教育毕业生求职信
2013/11/09 职场文书
业务员岗位职责
2013/11/16 职场文书
会计专业的自荐信
2013/12/12 职场文书
论文指导教师评语
2014/04/28 职场文书
中文专业求职信
2014/06/20 职场文书
委托书的写法
2014/09/16 职场文书
学生实习证明模板汇总
2014/09/25 职场文书
法学专业求职信范文
2015/03/19 职场文书
win10如何快速切换窗口 win10切换窗口快捷键分享
2022/07/23 数码科技