Laravel使用消息队列需要注意的一些问题


Posted in PHP onDecember 13, 2017

前言

消息队列对于大型的Web项目来说是必不可少的一个模块,通过消息队列可以解决大并发和多种语言通信接口等问题。对于大并发的问题,可以将耗时的任务或者不能同时大量并行的任务封装起来传输到消息队列中,由处理程序不断从消息队列中提取消息并进行处理,这样通过消息队列的缓冲可以使得在大并发情况下不再阻塞,如果性能不够用还可以添加多个处理任务从消息队列中获取消息进行处理。比如数据库的操作,当对数据库的读、写操作过多时就会存在锁表等问题,读的问题可以通过缓存等方案解决,写的问题就需要消息队列来解决。而且,在大型的Web项目开发中,很多情况下不可能通过一种语言实现,需要发挥不同语言的优势,比如PHP,虽然在理论意义上它可以做Web开发中的所有事情,但是有些问题用它解决效率将会非常低,比如实时socket连接和分布式事务处理等。

使用 Laravel 的消息队列处理异步任务,Redis 作为队列数据库,Supervisor 监控脚本异常中断并自动重启,这是 Laravel 处理队列任务的标准流程,但是实际中可能还会出现各种各样的问题,为了保证系统可靠性,还要注意几个问题。

一、执行失败重试次数设置

一定要设置任务执行失败重试次数,避免无限失败重试,超过重试次数 Laravel 会默认写到失败任务表中,也可以自己写执行失败后续处理逻辑。

php artisan queue:work redis --tries=3

需要先执行以下命令创建数据表:

php artisan queue:failed-table
php artisan migrate

二、程序异常的处理

有时候程序执行过程会发生异常,比如依赖其他接口,请求 HTTP 接口超时等等,如果不捕捉异常,那么当前这个队列就会中断不能继续运行下去,比如给 10000 个用户推送内容,需要依赖接口推送,如果中间的请求挂了就会影响到后面的推送。

这里的异常是指程序执行过程中发生的异常,不是指常驻进程挂掉,程序异常不一定导致常驻进程中断,况且进程中断有 Supervisor 监控并重启。

如捕获异常代码片段:

try {
 $r = $client->request('POST', '', [
  'query' => [
   'client_name'  => 'filemail',
   'client_version' => '1.0',
   'client_sequence' => 0,
   'uid'    => 692934013,//119481237
   'r'    => 1508312484,
  ],
  'body' => \GuzzleHttp\json_encode($body),
 ]);
 $result = $r->getBody()->getContents();
 $result = json_decode($result, true);
 if ($result['result'] == 0) {
  info("sendMail fail:" . json_encode($result));
  $this->pushLog($task['id'], $task['mail_id'], implode(',', $userIds), json_encode($result), 0);
 } else {
  Log::warning("sendMail fail:" . json_encode($result));
  $this->pushLog($task['id'], $task['mail_id'], implode(',', $userIds), json_encode($result), $result['result']);
 }
} catch (RequestException $e) {
 Log::warning('RequestException' . $e->getMessage());
} catch (Exception $e) {
 Log::emergency('Exception' . $e->getMessage());
}

三、修改代码记得重启 Supervisor

最后一点,修改了处理队列的程序,记得要重启 Supervisor,否则脚本不会生效。

Laravel 往 Redis 写队列的数据结构

队列用 list 类型存储,如图:

Laravel使用消息队列需要注意的一些问题 

value 内容如下:

{
 "job": "Illuminate\\Queue\\CallQueuedHandler@call",
 "data": {
 "commandName": "App\\Jobs\\SendFile",
 "command": "O:17:\"App\\Jobs\\SendFile\":5:{s:23:\"\u0000App\\Jobs\\SendFile\u0000task\";a:8:{s:5:\"title\";s:4:\"1111\";s:4:\"note\";s:2:\"11\";s:6:\"reward\";s:0:\"\";s:7:\"mail_id\";s:5:\"66681\";s:4:\"nums\";i:20;s:8:\"uid_file\";s:33:\"uidfile\/file-66681-1513058185.txt\";s:5:\"gcids\";s:40:\"1B9DD95645AAE8119F7DA9B9FF738D52BC8A1BD5\";s:2:\"id\";i:29;}s:6:\"\u0000*\u0000job\";N;s:10:\"connection\";N;s:5:\"queue\";s:8:\"sendfile\";s:5:\"delay\";N;}"
 },
 "id": "l0mjsUthbxm4TgIJNUH13km9N8DIpErK",
 "attempts": 1
}

包含失败重试次数,队列标识,处理队列的类,以及队列的数据等等。

参考链接

Laravel 官方文档 Queue 队列:

https://laravel.com/docs/5.5/queues

总结

以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,如果有疑问大家可以留言交流,谢谢大家对三水点靠木的支持。

PHP 相关文章推荐
第十节--抽象方法和抽象类
Nov 16 PHP
php获取url字符串截取路径的文件名和扩展名的函数
Jan 22 PHP
整理的一些实用WordPress后台MySQL操作命令
Jan 07 PHP
php中sql注入漏洞示例 sql注入漏洞修复
Jan 24 PHP
thinkphp路由规则使用示例详解和伪静态功能实现(apache重写)
Feb 24 PHP
php定时计划任务与fsockopen持续进程实例
May 23 PHP
php生成html文件方法总结
Dec 01 PHP
PHP中的print_r 与 var_dump 输出数组
Jun 13 PHP
ThinkPHP模板标签eq if 中区分0,null,false的方法
Mar 24 PHP
PHP 中魔术常量的实例详解
Oct 26 PHP
PHP折半(二分)查找算法实例分析
May 12 PHP
浅析PHP echo 和 print 语句
Jun 30 PHP
实例分析PHP中PHPMailer发邮件
Dec 13 #PHP
使用XHProf查找PHP性能瓶颈的实例
Dec 13 #PHP
PHP让数组中有相同值的组成新的数组实例
Dec 31 #PHP
详谈PHP中public,private,protected,abstract等关键字的用法
Dec 31 #PHP
php中通用的excel导出方法实例
Dec 30 #PHP
利用Laravel生成Gravatar头像地址的优雅方法
Dec 30 #PHP
PHP如何实现订单的延时处理详解
Dec 30 #PHP
You might like
PHP Mysql编程之高级技巧
2008/08/27 PHP
PHP 命令行参数详解及应用
2011/05/18 PHP
PHP面向对象程序设计OOP继承用法入门示例
2016/12/27 PHP
PHP对象实例化单例方法
2017/01/19 PHP
PHP实现链式操作的三种方法详解
2017/11/16 PHP
css transform 3D幻灯片特效实现步骤解读
2013/03/27 Javascript
js弹出层(jQuery插件形式附带reLoad功能)
2013/04/12 Javascript
如何使用Javascript正则表达式来格式化XML内容
2013/07/04 Javascript
js获取触发事件元素在整个网页中的绝对坐标(示例代码)
2013/12/13 Javascript
js实现对table动态添加、删除和更新的方法
2015/02/10 Javascript
js实现支持手机滑动切换的轮播图片效果实例
2015/04/29 Javascript
javascript限制文本框输入值类型的方法
2015/05/07 Javascript
浅析JavaScript作用域链、执行上下文与闭包
2016/02/01 Javascript
浅析Javascript中bind()方法的使用与实现
2016/05/30 Javascript
JavaScript创建对象的七种方式(推荐)
2017/06/26 Javascript
详解使用webpack+electron+reactJs开发windows桌面应用
2019/02/01 Javascript
Node.js中package.json中库的版本号(~和^)
2019/04/02 Javascript
js的新生代垃圾回收知识点总结
2019/08/22 Javascript
JS关闭子窗口并且刷新上一个窗口的实现示例
2020/03/10 Javascript
jquery实现抽奖功能
2020/10/22 jQuery
pyqt4教程之实现半透明的天气预报界面示例
2014/03/02 Python
python抓取网页图片并放到指定文件夹
2014/04/24 Python
python使用htmllib分析网页内容的方法
2015/05/08 Python
python中函数传参详解
2016/07/03 Python
Pycharm配置lua编译环境过程图解
2020/11/28 Python
纯CSS3单页切换导航菜单界面设计的简单实现
2016/08/16 HTML / CSS
HTML5超文本标记语言的实现方法
2020/09/24 HTML / CSS
汉米尔顿手表官网:Hamilton
2020/09/13 全球购物
W Hamond官网:始于1979年的钻石专家
2020/07/20 全球购物
简述进程的启动、终止的方式以及如何进行进程的查看
2013/07/12 面试题
大学自我鉴定范文
2013/12/26 职场文书
全国助残日活动总结
2015/05/11 职场文书
维护民族团结心得体会2016
2016/01/15 职场文书
SpringBoot项目中控制台日志的保存配置操作
2021/06/18 Java/Android
为什么MySQL分页用limit会越来越慢
2021/07/25 MySQL
使用HttpSessionListener监听器实战
2022/03/17 Java/Android