PHP使用pcntl_fork实现多进程下载图片的方法


Posted in PHP onDecember 16, 2014

本文实例讲述了PHP使用pcntl_fork实现多进程下载图片的方法。分享给大家供大家参考。具体分析如下:

PHP pcntl_fork — 在当前进程当前位置产生分支,子进程,译注:fork是创建了一个子进程,父进程和子进程 都从fork的位置开始向下继续执行,不同的是父进程执行过程中,得到的fork返回值为子进程号,而子进程得到的是0.

注意:PHP有个pcntl_fork的函数可以实现多进程,但要加载pcntl拓展,而且只有在linux下才能编译这个拓展.

1.首先在ubuntu下编译pcntl.so,我的ubuntu下找不到pcntl的包,于是创建一个文件夹下载了整个PHP包,在里面找到了pcntl包运行如下命令,代码如下:

# mkdir php 

# cd php 

# apt-get source php5 

# cd php5-(WHATEVER_RELEASE)/ext/pcntl 

# phpize 

# ./configure (注一) 

# make 

# make install phpize 命令是用来准备 PHP 外挂模块的编译环境的

成功的安装将建立 extname.so 并放置于 PHP 的外挂模块目录中(预设存放于 /usr/lib/php/modules/ 内),需要调整 php.ini,加入 extension=extname.so 这一行之后才能使用此外挂模块.

例:

void pcntl_exec(string $path [,array $args [,array $envs ]])

pcntl_exec — 在当前进程空间执行指定程序,代码如下:

$cmds=array( 

        array('/home/jerry/projects/www/test2.php'), 

        array('/home/jerry/projects/www/test3.php') 

); 

 

foreach($cmds as $cmd){ 

        $pid=pcntl_fork(); 

        if($pid==-1){ 

        //进程创建失败 

            echo '创建子进程失败时返回-1'; 

            exit(-1); 

        } 

        else if($pid){ 

        //父进程会得到子进程号,所以这里是父进程执行的逻辑 

            pcntl_wait($status,WNOHANG); 

        } 

        else{ 

        //子进程处理逻辑 

            sleep(5); 

            pcntl_exec('/usr/bin/php',$cmd); 

            exit(0); 

        } 

}

例,实例多图片同步下载,代码如下:
#!/usr/bin/php 

<?php 

// 需要抓取的网页地址 

$url = 'https://3water.com'; 

$content = file_get_contents($url); 

preg_match_all('/<imgs+src="(.*?)"/', $content, $matches,PREG_SET_ORDER); 

echo "已发现".count($matches)."张图片n"; 

 

list($sm, $ss) = explode(" ", microtime()); 

foreach ($matches as $k => $val) 

{ 

 $pid[$k] = pcntl_fork(); 

 if(!$pid[$k]) 

 { 

  download($url, $val); 

  // 子进程要exit否则会进行递归多进程,父进程不要exit否则终止多进程 

  exit(0); 

 } 

 

 if ($pid[$k]) 

 { 

//    pcntl_waitpid($pid[$k], $status, WUNTRACED); 

 } 

 

} 

echo "下载完成n"; 

 

list($em, $es) = explode(" ", microtime()); 

 

echo "用时:",($es+$em) - ($ss + $sm),"n"; 

/** 

 * 抓取网页图片 

 *  

 */ 

function download($url, $val) 

{ 

 $pic_url = $val[1]; 

 if (strpos($val[1], '//') !== false) 

 { 

  ; 

 } 

 elseif (preg_match('@^(.*?)/@', $val[1], $inner_matches) == 0) 

 { 

  $pic_url = $url.$val[1]; 

 } 

 elseif (preg_match('@[:.]@', $inner_matches[1], $tmp_matches) == 0) 

 { 

  $pic_url = $url.$val[1]; 

 } 

 

 $pic = file_get_contents($pic_url); 

 

 if ($pic === false) 

 { 

  return; 

 } 

 

 preg_match('@/([^/]+)$@', $pic_url, $tmp_matches); 

 // 可使用assert处理异常 

 $pic_file_name = $tmp_matches[1]; 

 $f = fopen("tmp/".$pic_file_name, "wb"); # 

 fwrite($f, $pic); 

 fclose($f); 

} 

 

/* End of file pcntl_fork.php */ 

?>

希望本文所述对大家的PHP程序设计有所帮助。

PHP 相关文章推荐
用PHP的ob_start();控制您的浏览器cache!
Nov 25 PHP
配置Apache2.2+PHP5+CakePHP1.2+MySQL5运行环境
Apr 25 PHP
php数组函数序列之array_splice() - 在数组任意位置插入元素
Nov 07 PHP
关于PHPDocument 代码注释规范的总结
Jun 25 PHP
session在php5.3中的变化 session_is_registered() is deprecated in
Nov 12 PHP
微信扫描二维码登录网站代码示例
Dec 30 PHP
PHP5.3连接Oracle客户端及PDO_OCI模块的安装方法
May 13 PHP
phpmailer简单发送邮件的方法(附phpmailer源码下载)
Jun 13 PHP
PHP-X系列教程之内置函数的使用示例
Oct 16 PHP
php从数据库读取数据,并以json格式返回数据的方法
Aug 21 PHP
PHP正则之正向预查与反向预查讲解与实例
Apr 06 PHP
Laravel中获取IP的真实地理位置
Apr 01 PHP
php中最简单的字符串匹配算法
Dec 16 #PHP
PHP实现将科学计数法转换为原始数字字符串的方法
Dec 16 #PHP
php输出金字塔的2种实现方法
Dec 16 #PHP
smarty缓存用法分析
Dec 16 #PHP
yii2.0之GridView自定义按钮和链接用法
Dec 15 #PHP
smarty表格换行实例
Dec 15 #PHP
PHP使用xmllint命令处理xml与html的方法
Dec 15 #PHP
You might like
php+jQuery.uploadify实现文件上传教程
2014/12/26 PHP
PHP导入导出Excel代码
2015/07/07 PHP
理解PHP中的Session及对Session有效期的控制
2016/01/08 PHP
laravel实现前后台路由分离的方法
2019/10/13 PHP
jquery 页面全选框实践代码
2010/04/02 Javascript
javascript代码加载优化方法
2011/01/30 Javascript
在jQuery1.5中使用deferred对象 着放大镜看Promise
2011/03/12 Javascript
JavaScript数值数组排序示例分享
2014/05/27 Javascript
JavaScript组合拼接字符串的效率对比测试
2014/11/06 Javascript
jQuery选择器源码解读(八):addCombinator函数
2015/03/31 Javascript
javascript实现画不相交的圆
2015/04/07 Javascript
实例讲解javascript注册事件处理函数
2016/01/09 Javascript
使用JQuery实现智能表单验证功能
2016/03/08 Javascript
使用Javascript判断浏览器终端设备(PC、IOS(iphone)、Android)
2017/01/04 Javascript
vue 监听键盘回车事件详解 @keyup.enter || @keyup.enter.native
2018/08/25 Javascript
Vue项目引进ElementUI组件的方法
2018/11/11 Javascript
python解析文件示例
2014/01/23 Python
Python使用htpasswd实现基本认证授权的例子
2014/06/10 Python
Python开发的单词频率统计工具wordsworth使用方法
2014/06/25 Python
在Python下尝试多线程编程
2015/04/28 Python
Python下载懒人图库JavaScript特效
2015/05/28 Python
python获取元素在数组中索引号的方法
2015/07/15 Python
Python项目 基于Scapy实现SYN泛洪攻击的方法
2019/07/23 Python
用python求一重积分和二重积分的例子
2019/12/06 Python
丝芙兰中国官方商城:SEPHORA中国
2018/01/10 全球购物
印度尼西亚最好的小工具在线商店:Erafone.com
2019/03/26 全球购物
德国亚马逊官方网站:Amazon.de
2020/11/15 全球购物
怎样客观的做好自我评价
2013/12/28 职场文书
医学生职业规划范文
2014/01/05 职场文书
教学评估实施方案
2014/03/16 职场文书
电大奖学金获奖感言
2014/08/14 职场文书
2014年初级职称工作总结
2014/12/08 职场文书
2015年社区重阳节活动总结
2015/07/30 职场文书
2016拓展训练心得体会范文
2016/01/12 职场文书
标准发言稿结尾
2019/07/18 职场文书
Python实现排序方法常见的四种
2021/07/15 Python