Laravel使用消息队列需要注意的一些问题


Posted in PHP onDecember 13, 2017

前言

消息队列对于大型的Web项目来说是必不可少的一个模块,通过消息队列可以解决大并发和多种语言通信接口等问题。对于大并发的问题,可以将耗时的任务或者不能同时大量并行的任务封装起来传输到消息队列中,由处理程序不断从消息队列中提取消息并进行处理,这样通过消息队列的缓冲可以使得在大并发情况下不再阻塞,如果性能不够用还可以添加多个处理任务从消息队列中获取消息进行处理。比如数据库的操作,当对数据库的读、写操作过多时就会存在锁表等问题,读的问题可以通过缓存等方案解决,写的问题就需要消息队列来解决。而且,在大型的Web项目开发中,很多情况下不可能通过一种语言实现,需要发挥不同语言的优势,比如PHP,虽然在理论意义上它可以做Web开发中的所有事情,但是有些问题用它解决效率将会非常低,比如实时socket连接和分布式事务处理等。

使用 Laravel 的消息队列处理异步任务,Redis 作为队列数据库,Supervisor 监控脚本异常中断并自动重启,这是 Laravel 处理队列任务的标准流程,但是实际中可能还会出现各种各样的问题,为了保证系统可靠性,还要注意几个问题。

一、执行失败重试次数设置

一定要设置任务执行失败重试次数,避免无限失败重试,超过重试次数 Laravel 会默认写到失败任务表中,也可以自己写执行失败后续处理逻辑。

php artisan queue:work redis --tries=3

需要先执行以下命令创建数据表:

php artisan queue:failed-table
php artisan migrate

二、程序异常的处理

有时候程序执行过程会发生异常,比如依赖其他接口,请求 HTTP 接口超时等等,如果不捕捉异常,那么当前这个队列就会中断不能继续运行下去,比如给 10000 个用户推送内容,需要依赖接口推送,如果中间的请求挂了就会影响到后面的推送。

这里的异常是指程序执行过程中发生的异常,不是指常驻进程挂掉,程序异常不一定导致常驻进程中断,况且进程中断有 Supervisor 监控并重启。

如捕获异常代码片段:

try {
 $r = $client->request('POST', '', [
  'query' => [
   'client_name'  => 'filemail',
   'client_version' => '1.0',
   'client_sequence' => 0,
   'uid'    => 692934013,//119481237
   'r'    => 1508312484,
  ],
  'body' => \GuzzleHttp\json_encode($body),
 ]);
 $result = $r->getBody()->getContents();
 $result = json_decode($result, true);
 if ($result['result'] == 0) {
  info("sendMail fail:" . json_encode($result));
  $this->pushLog($task['id'], $task['mail_id'], implode(',', $userIds), json_encode($result), 0);
 } else {
  Log::warning("sendMail fail:" . json_encode($result));
  $this->pushLog($task['id'], $task['mail_id'], implode(',', $userIds), json_encode($result), $result['result']);
 }
} catch (RequestException $e) {
 Log::warning('RequestException' . $e->getMessage());
} catch (Exception $e) {
 Log::emergency('Exception' . $e->getMessage());
}

三、修改代码记得重启 Supervisor

最后一点,修改了处理队列的程序,记得要重启 Supervisor,否则脚本不会生效。

Laravel 往 Redis 写队列的数据结构

队列用 list 类型存储,如图:

Laravel使用消息队列需要注意的一些问题 

value 内容如下:

{
 "job": "Illuminate\\Queue\\CallQueuedHandler@call",
 "data": {
 "commandName": "App\\Jobs\\SendFile",
 "command": "O:17:\"App\\Jobs\\SendFile\":5:{s:23:\"\u0000App\\Jobs\\SendFile\u0000task\";a:8:{s:5:\"title\";s:4:\"1111\";s:4:\"note\";s:2:\"11\";s:6:\"reward\";s:0:\"\";s:7:\"mail_id\";s:5:\"66681\";s:4:\"nums\";i:20;s:8:\"uid_file\";s:33:\"uidfile\/file-66681-1513058185.txt\";s:5:\"gcids\";s:40:\"1B9DD95645AAE8119F7DA9B9FF738D52BC8A1BD5\";s:2:\"id\";i:29;}s:6:\"\u0000*\u0000job\";N;s:10:\"connection\";N;s:5:\"queue\";s:8:\"sendfile\";s:5:\"delay\";N;}"
 },
 "id": "l0mjsUthbxm4TgIJNUH13km9N8DIpErK",
 "attempts": 1
}

包含失败重试次数,队列标识,处理队列的类,以及队列的数据等等。

参考链接

Laravel 官方文档 Queue 队列:

https://laravel.com/docs/5.5/queues

总结

以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,如果有疑问大家可以留言交流,谢谢大家对三水点靠木的支持。

PHP 相关文章推荐
也谈截取首页新闻 - 范例
Oct 09 PHP
php 计算两个时间戳相隔的时间的函数(小时)
Dec 18 PHP
php用数组返回无限分类的列表数据的代码
Aug 08 PHP
解析php file_exists无效的解决办法
Jun 26 PHP
php使用glob函数快速查询指定目录文件的方法
Nov 15 PHP
Zend Framework入门教程之Zend_Registry组件用法详解
Dec 09 PHP
PHP SESSION机制的理解与实例
Mar 22 PHP
Laravel第三方包报class not found的解决方法
Oct 13 PHP
关于laravel框架中的常用目录路径函数
Oct 23 PHP
Laravel框架处理用户的请求操作详解
Dec 20 PHP
PHP For循环字母A-Z当超过26个字母时输出AA,AB,AC
Feb 16 PHP
PHP正则表达式函数preg_replace用法实例分析
Jun 04 PHP
实例分析PHP中PHPMailer发邮件
Dec 13 #PHP
使用XHProf查找PHP性能瓶颈的实例
Dec 13 #PHP
PHP让数组中有相同值的组成新的数组实例
Dec 31 #PHP
详谈PHP中public,private,protected,abstract等关键字的用法
Dec 31 #PHP
php中通用的excel导出方法实例
Dec 30 #PHP
利用Laravel生成Gravatar头像地址的优雅方法
Dec 30 #PHP
PHP如何实现订单的延时处理详解
Dec 30 #PHP
You might like
windows xp下安装pear
2006/12/02 PHP
php除数取整示例
2014/04/24 PHP
thinkPHP3.1验证码的简单实现方法
2016/04/22 PHP
ECMAScript 基础知识
2007/06/29 Javascript
JavaScript 开发中规范性的一点感想
2009/06/23 Javascript
基于jQuery的弹出警告对话框美化插件(警告,确认和提示)
2010/06/10 Javascript
表单JS弹出填写提示效果代码
2011/04/16 Javascript
用js正确判断用户名cookie是否存在的方法
2014/01/28 Javascript
浅谈Javascript变量作用域问题
2014/12/16 Javascript
nodejs实现获取某宝商品分类
2015/05/28 NodeJs
js实现温度计时间样式代码分享
2015/08/21 Javascript
五种js判断是否为整数类型方式
2015/12/03 Javascript
Vue.js双向绑定实现原理详解
2016/12/22 Javascript
vue 实现在同一界面实现组件的动态添加和删除功能
2020/06/16 Javascript
JS实现简单打字测试
2020/06/24 Javascript
[11:57]《一刀刀一天》第十七期:TI中国军团加油!
2014/05/26 DOTA
python中实现定制类的特殊方法总结
2014/09/28 Python
以一段代码为实例快速入门Python2.7
2015/03/31 Python
在Python中封装GObject模块进行图形化程序编程的教程
2015/04/14 Python
Python之str操作方法(详解)
2017/06/19 Python
Python正则表达式常用函数总结
2017/06/24 Python
python 3.0 模拟用户登录功能并实现三次错误锁定
2017/11/01 Python
Python视频爬虫实现下载头条视频功能示例
2018/05/07 Python
Django中使用第三方登录的示例代码
2018/08/20 Python
python实现列表中最大最小值输出的示例
2019/07/09 Python
python 正则表达式贪婪模式与非贪婪模式原理、用法实例分析
2019/10/14 Python
Win下PyInstaller 安装和使用教程
2019/12/25 Python
python接入支付宝的实例操作
2020/07/20 Python
解除施工合同协议书
2014/10/17 职场文书
2015年部门工作总结范文
2015/03/31 职场文书
个人催款函范文
2015/06/23 职场文书
2016大学生党校学习心得体会
2016/01/06 职场文书
《这片土地是神圣的》教学反思
2016/02/16 职场文书
2016年教育局“我们的节日——端午节”主题活动总结
2016/04/01 职场文书
Apache Hudi集成Spark SQL操作hide表
2022/03/31 Servers
零基础学java之带返回值的方法的定义和调用
2022/04/10 Java/Android