Laravel使用消息队列需要注意的一些问题


Posted in PHP onDecember 13, 2017

前言

消息队列对于大型的Web项目来说是必不可少的一个模块,通过消息队列可以解决大并发和多种语言通信接口等问题。对于大并发的问题,可以将耗时的任务或者不能同时大量并行的任务封装起来传输到消息队列中,由处理程序不断从消息队列中提取消息并进行处理,这样通过消息队列的缓冲可以使得在大并发情况下不再阻塞,如果性能不够用还可以添加多个处理任务从消息队列中获取消息进行处理。比如数据库的操作,当对数据库的读、写操作过多时就会存在锁表等问题,读的问题可以通过缓存等方案解决,写的问题就需要消息队列来解决。而且,在大型的Web项目开发中,很多情况下不可能通过一种语言实现,需要发挥不同语言的优势,比如PHP,虽然在理论意义上它可以做Web开发中的所有事情,但是有些问题用它解决效率将会非常低,比如实时socket连接和分布式事务处理等。

使用 Laravel 的消息队列处理异步任务,Redis 作为队列数据库,Supervisor 监控脚本异常中断并自动重启,这是 Laravel 处理队列任务的标准流程,但是实际中可能还会出现各种各样的问题,为了保证系统可靠性,还要注意几个问题。

一、执行失败重试次数设置

一定要设置任务执行失败重试次数,避免无限失败重试,超过重试次数 Laravel 会默认写到失败任务表中,也可以自己写执行失败后续处理逻辑。

php artisan queue:work redis --tries=3

需要先执行以下命令创建数据表:

php artisan queue:failed-table
php artisan migrate

二、程序异常的处理

有时候程序执行过程会发生异常,比如依赖其他接口,请求 HTTP 接口超时等等,如果不捕捉异常,那么当前这个队列就会中断不能继续运行下去,比如给 10000 个用户推送内容,需要依赖接口推送,如果中间的请求挂了就会影响到后面的推送。

这里的异常是指程序执行过程中发生的异常,不是指常驻进程挂掉,程序异常不一定导致常驻进程中断,况且进程中断有 Supervisor 监控并重启。

如捕获异常代码片段:

try {
 $r = $client->request('POST', '', [
  'query' => [
   'client_name'  => 'filemail',
   'client_version' => '1.0',
   'client_sequence' => 0,
   'uid'    => 692934013,//119481237
   'r'    => 1508312484,
  ],
  'body' => \GuzzleHttp\json_encode($body),
 ]);
 $result = $r->getBody()->getContents();
 $result = json_decode($result, true);
 if ($result['result'] == 0) {
  info("sendMail fail:" . json_encode($result));
  $this->pushLog($task['id'], $task['mail_id'], implode(',', $userIds), json_encode($result), 0);
 } else {
  Log::warning("sendMail fail:" . json_encode($result));
  $this->pushLog($task['id'], $task['mail_id'], implode(',', $userIds), json_encode($result), $result['result']);
 }
} catch (RequestException $e) {
 Log::warning('RequestException' . $e->getMessage());
} catch (Exception $e) {
 Log::emergency('Exception' . $e->getMessage());
}

三、修改代码记得重启 Supervisor

最后一点,修改了处理队列的程序,记得要重启 Supervisor,否则脚本不会生效。

Laravel 往 Redis 写队列的数据结构

队列用 list 类型存储,如图:

Laravel使用消息队列需要注意的一些问题 

value 内容如下:

{
 "job": "Illuminate\\Queue\\CallQueuedHandler@call",
 "data": {
 "commandName": "App\\Jobs\\SendFile",
 "command": "O:17:\"App\\Jobs\\SendFile\":5:{s:23:\"\u0000App\\Jobs\\SendFile\u0000task\";a:8:{s:5:\"title\";s:4:\"1111\";s:4:\"note\";s:2:\"11\";s:6:\"reward\";s:0:\"\";s:7:\"mail_id\";s:5:\"66681\";s:4:\"nums\";i:20;s:8:\"uid_file\";s:33:\"uidfile\/file-66681-1513058185.txt\";s:5:\"gcids\";s:40:\"1B9DD95645AAE8119F7DA9B9FF738D52BC8A1BD5\";s:2:\"id\";i:29;}s:6:\"\u0000*\u0000job\";N;s:10:\"connection\";N;s:5:\"queue\";s:8:\"sendfile\";s:5:\"delay\";N;}"
 },
 "id": "l0mjsUthbxm4TgIJNUH13km9N8DIpErK",
 "attempts": 1
}

包含失败重试次数,队列标识,处理队列的类,以及队列的数据等等。

参考链接

Laravel 官方文档 Queue 队列:

https://laravel.com/docs/5.5/queues

总结

以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,如果有疑问大家可以留言交流,谢谢大家对三水点靠木的支持。

PHP 相关文章推荐
无数据库的详细域名查询程序PHP版(5)
Oct 09 PHP
如何实现给定日期的若干天以后的日期
Oct 09 PHP
PHP新手上路(六)
Oct 09 PHP
解析php入库和出库
Jun 25 PHP
php格式化日期和时间格式化示例分享
Feb 24 PHP
PHP防止post重复提交数据的简单例子
Jun 07 PHP
CodeIgniter中使用cookie的三种方式详解
Jul 18 PHP
PHP return语句的另一个作用
Jul 30 PHP
浅谈PHP5.6 与 PHP7.0 区别
Oct 09 PHP
Thinkphp5.0框架视图view的循环标签用法示例
Oct 12 PHP
PhpStorm 如何优雅的调试Hyperf的方法步骤
Nov 24 PHP
gearman中任务的优先级和返回状态实例分析
Feb 27 PHP
实例分析PHP中PHPMailer发邮件
Dec 13 #PHP
使用XHProf查找PHP性能瓶颈的实例
Dec 13 #PHP
PHP让数组中有相同值的组成新的数组实例
Dec 31 #PHP
详谈PHP中public,private,protected,abstract等关键字的用法
Dec 31 #PHP
php中通用的excel导出方法实例
Dec 30 #PHP
利用Laravel生成Gravatar头像地址的优雅方法
Dec 30 #PHP
PHP如何实现订单的延时处理详解
Dec 30 #PHP
You might like
PHP中获取内网用户MAC地址(WINDOWS/linux)的实现代码
2011/08/11 PHP
PHP遍历数组的几种方法
2012/03/22 PHP
php读取文件内容到数组的方法
2015/03/16 PHP
PHP SPL 被遗落的宝石【SPL应用浅析】
2018/04/20 PHP
Laravel框架FormRequest中重写错误处理的方法
2019/02/18 PHP
PHP设计模式之迭代器模式Iterator实例分析【对象行为型】
2020/04/26 PHP
PHP isset()及empty()用法区别详解
2020/08/29 PHP
jQueryUI的Dialog的简单封装
2010/06/07 Javascript
jQuery scroll事件实现监控滚动条分页示例
2014/04/04 Javascript
jQuery内置的AJAX功能和JSON的使用实例
2014/07/27 Javascript
js学习总结之dom2级事件基础知识详解
2017/07/27 Javascript
js自定义trim函数实现删除两端空格功能
2018/02/09 Javascript
webpack组织模块打包Library的原理及实现
2018/03/10 Javascript
js中的深浅拷贝问题简析
2019/05/10 Javascript
Angular6使用forRoot() 注册单一实例服务问题
2019/08/27 Javascript
mpvue微信小程序的接口请求fly全局拦截代码实例
2019/11/13 Javascript
深入浅析JavaScript中的in关键字和for-in循环
2020/04/20 Javascript
python数字图像处理之骨架提取与分水岭算法
2018/04/27 Python
python如何创建TCP服务端和客户端
2018/08/26 Python
详解Ubuntu16.04安装Python3.7及其pip3并切换为默认版本
2019/02/25 Python
python 实现图片上传接口开发 并生成可以访问的图片url
2019/12/18 Python
python pymysql库的常用操作
2020/10/16 Python
AT&T Wireless:手机、无限数据计划和配件
2018/06/03 全球购物
精致的手工皮鞋:Shoe Embassy
2019/11/08 全球购物
.NET现在共支持多少种语言
2014/02/26 面试题
家长给老师的道歉信
2014/01/13 职场文书
企业业务员岗位职责
2014/03/14 职场文书
小学开学典礼主持词
2014/03/19 职场文书
乡村文明行动实施方案
2014/03/29 职场文书
应届大专生自荐书
2014/06/16 职场文书
2014年银行信贷员工作总结
2014/12/08 职场文书
2014年医院个人工作总结
2014/12/09 职场文书
企业党支部工作总结2015
2015/05/21 职场文书
大学运动会通讯稿
2015/07/18 职场文书
golang 实现并发求和
2021/05/08 Golang
SpringCloud Alibaba项目实战之nacos-server服务搭建过程
2021/06/21 Java/Android