Laravel使用消息队列需要注意的一些问题


Posted in PHP onDecember 13, 2017

前言

消息队列对于大型的Web项目来说是必不可少的一个模块,通过消息队列可以解决大并发和多种语言通信接口等问题。对于大并发的问题,可以将耗时的任务或者不能同时大量并行的任务封装起来传输到消息队列中,由处理程序不断从消息队列中提取消息并进行处理,这样通过消息队列的缓冲可以使得在大并发情况下不再阻塞,如果性能不够用还可以添加多个处理任务从消息队列中获取消息进行处理。比如数据库的操作,当对数据库的读、写操作过多时就会存在锁表等问题,读的问题可以通过缓存等方案解决,写的问题就需要消息队列来解决。而且,在大型的Web项目开发中,很多情况下不可能通过一种语言实现,需要发挥不同语言的优势,比如PHP,虽然在理论意义上它可以做Web开发中的所有事情,但是有些问题用它解决效率将会非常低,比如实时socket连接和分布式事务处理等。

使用 Laravel 的消息队列处理异步任务,Redis 作为队列数据库,Supervisor 监控脚本异常中断并自动重启,这是 Laravel 处理队列任务的标准流程,但是实际中可能还会出现各种各样的问题,为了保证系统可靠性,还要注意几个问题。

一、执行失败重试次数设置

一定要设置任务执行失败重试次数,避免无限失败重试,超过重试次数 Laravel 会默认写到失败任务表中,也可以自己写执行失败后续处理逻辑。

php artisan queue:work redis --tries=3

需要先执行以下命令创建数据表:

php artisan queue:failed-table
php artisan migrate

二、程序异常的处理

有时候程序执行过程会发生异常,比如依赖其他接口,请求 HTTP 接口超时等等,如果不捕捉异常,那么当前这个队列就会中断不能继续运行下去,比如给 10000 个用户推送内容,需要依赖接口推送,如果中间的请求挂了就会影响到后面的推送。

这里的异常是指程序执行过程中发生的异常,不是指常驻进程挂掉,程序异常不一定导致常驻进程中断,况且进程中断有 Supervisor 监控并重启。

如捕获异常代码片段:

try {
 $r = $client->request('POST', '', [
  'query' => [
   'client_name'  => 'filemail',
   'client_version' => '1.0',
   'client_sequence' => 0,
   'uid'    => 692934013,//119481237
   'r'    => 1508312484,
  ],
  'body' => \GuzzleHttp\json_encode($body),
 ]);
 $result = $r->getBody()->getContents();
 $result = json_decode($result, true);
 if ($result['result'] == 0) {
  info("sendMail fail:" . json_encode($result));
  $this->pushLog($task['id'], $task['mail_id'], implode(',', $userIds), json_encode($result), 0);
 } else {
  Log::warning("sendMail fail:" . json_encode($result));
  $this->pushLog($task['id'], $task['mail_id'], implode(',', $userIds), json_encode($result), $result['result']);
 }
} catch (RequestException $e) {
 Log::warning('RequestException' . $e->getMessage());
} catch (Exception $e) {
 Log::emergency('Exception' . $e->getMessage());
}

三、修改代码记得重启 Supervisor

最后一点,修改了处理队列的程序,记得要重启 Supervisor,否则脚本不会生效。

Laravel 往 Redis 写队列的数据结构

队列用 list 类型存储,如图:

Laravel使用消息队列需要注意的一些问题 

value 内容如下:

{
 "job": "Illuminate\\Queue\\CallQueuedHandler@call",
 "data": {
 "commandName": "App\\Jobs\\SendFile",
 "command": "O:17:\"App\\Jobs\\SendFile\":5:{s:23:\"\u0000App\\Jobs\\SendFile\u0000task\";a:8:{s:5:\"title\";s:4:\"1111\";s:4:\"note\";s:2:\"11\";s:6:\"reward\";s:0:\"\";s:7:\"mail_id\";s:5:\"66681\";s:4:\"nums\";i:20;s:8:\"uid_file\";s:33:\"uidfile\/file-66681-1513058185.txt\";s:5:\"gcids\";s:40:\"1B9DD95645AAE8119F7DA9B9FF738D52BC8A1BD5\";s:2:\"id\";i:29;}s:6:\"\u0000*\u0000job\";N;s:10:\"connection\";N;s:5:\"queue\";s:8:\"sendfile\";s:5:\"delay\";N;}"
 },
 "id": "l0mjsUthbxm4TgIJNUH13km9N8DIpErK",
 "attempts": 1
}

包含失败重试次数,队列标识,处理队列的类,以及队列的数据等等。

参考链接

Laravel 官方文档 Queue 队列:

https://laravel.com/docs/5.5/queues

总结

以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,如果有疑问大家可以留言交流,谢谢大家对三水点靠木的支持。

PHP 相关文章推荐
在同一窗体中使用PHP来处理多个提交任务
May 08 PHP
php header()函数使用说明
Jul 10 PHP
php cc攻击代码与防范方法
Oct 18 PHP
php实现的zip文件内容比较类
Sep 24 PHP
浅谈php中include文件变量作用域
Jun 18 PHP
PHP根据session与cookie用户登录状态操作类的代码
May 13 PHP
PHP实现的最大正向匹配算法示例
Dec 19 PHP
PHP实现二维数组中的查找算法小结
Jun 09 PHP
PHP使用SMTP邮件服务器发送邮件示例
Aug 28 PHP
Yii支持多域名cors原理的实现
Dec 05 PHP
PHP结合Redis+MySQL实现冷热数据交换应用案例详解
Jul 09 PHP
使用swoole 定时器变更超时未支付订单状态的解决方案
Jul 24 PHP
实例分析PHP中PHPMailer发邮件
Dec 13 #PHP
使用XHProf查找PHP性能瓶颈的实例
Dec 13 #PHP
PHP让数组中有相同值的组成新的数组实例
Dec 31 #PHP
详谈PHP中public,private,protected,abstract等关键字的用法
Dec 31 #PHP
php中通用的excel导出方法实例
Dec 30 #PHP
利用Laravel生成Gravatar头像地址的优雅方法
Dec 30 #PHP
PHP如何实现订单的延时处理详解
Dec 30 #PHP
You might like
syphon 虹吸式咖啡冲泡冲煮倒水的得与失
2021/03/03 冲泡冲煮
基于mysql的论坛(1)
2006/10/09 PHP
用php简单实现加减乘除计算器
2014/01/06 PHP
php示例详解Constructor Prototype Pattern 原型模式
2015/10/15 PHP
Yii2框架数据验证操作实例详解
2018/05/02 PHP
php接口隔离原则实例分析
2019/11/11 PHP
onsubmit阻止form表单提交与onclick的相关操作
2010/09/03 Javascript
javascript中IE浏览器不支持NEW DATE()带参数的解决方法
2012/03/01 Javascript
详解JS 比较两个Json对象的值是否相等的实例
2013/11/20 Javascript
根据当前时间在jsp页面上显示上午或下午
2014/08/18 Javascript
运用jQuery定时器的原理实现banner图片切换
2014/10/22 Javascript
使用jQuery在对象中缓存选择器的简单方法
2015/06/30 Javascript
js实现网页多级级联菜单代码
2015/08/20 Javascript
AngularJS入门教程之AngularJS表达式
2016/04/18 Javascript
浅析JSONP技术原理及实现
2016/06/08 Javascript
用jQuery的AJax实现异步访问、异步加载
2016/11/02 Javascript
Vue.js中用webpack合并打包多个组件并实现按需加载
2017/02/17 Javascript
JavaScript门面模式详解
2017/10/19 Javascript
浅谈Vue内置component组件的应用场景
2018/03/27 Javascript
three.js搭建室内场景教程
2018/12/30 Javascript
浅谈Angular单元测试总结
2019/03/22 Javascript
Vue Object.defineProperty及ProxyVue实现双向数据绑定
2020/09/02 Javascript
Python中的with...as用法介绍
2015/05/28 Python
Python找出9个连续的空闲端口
2016/02/01 Python
python爬取淘宝商品销量信息
2018/11/16 Python
python对Excel的读取的示例代码
2020/02/14 Python
船餐厅和泰晤士河餐饮游轮:Bateaux London
2018/03/19 全球购物
盖尔斯工厂店:GUESS Factory
2020/01/21 全球购物
如何查看在weblogic中已经发布的EJB
2012/06/01 面试题
介绍下Lucene建立索引的过程
2016/03/02 面试题
清明节网上祭英烈活动总结
2014/04/30 职场文书
节能减耗标语
2014/06/21 职场文书
县政府班子个人对照检查材料
2014/10/05 职场文书
亮剑观后感600字
2015/06/05 职场文书
SQL基础查询和LINQ集成化查询
2022/01/18 MySQL
深入讲解Vue中父子组件通信与事件触发
2022/03/22 Vue.js