laravel异步监控定时调度器实例详解


Posted in PHP onJune 21, 2019

定时调度器是什么

laravel默认提供了一个命令定时任务的功能,在其他的php框架下面,没有这个定时任务,我们要跑一些异步脚本怎么操作呢,只能依赖我们系统提供的crontab来做,这就导致我们每次发版本新增定时任务都要去服务器更改crontab代码,获取更新这个配置。

执行命令是php artisan schedule:run 来执行,那放在哪里执行呢,没错这个调起还是需要依赖我们crontab来执行,但是只需要配置一次,后续所有定时任务都在我们业务代码进行控制

场景

我们有一个导入数据的定时任务

//每分钟导入库数据
$schedule->command(self::SIGNATURE)->withoutOverlapping()->everyMinute()->runInBackground();

这里导入长时间最好使用runInBackground(),表示异步执行,其实就是在shell脚本的末尾加上 & 符号,在linux上完全依赖系统的方式完成。

这里使用了withoutOverlapping() 表示在同一时刻只能有一个任务执行,主要逻辑使用的是排它锁实现,依赖于我们cache的driver,我这里使用的是redis,后面作为锁的过期直接redis提供的key过期来做。

出现问题

这个任务在正常情况下都是非常完美的,因为同一时刻只有一个再跑,跑完就可以,但是一个场景出现
有一天我们的qa同学刚部署环境后,我们服务端就在默默的导入库了,因为使用withoutOverlapping($expire_at=1440)这个时候在redis就有一个锁产生了,这个默认带参数是锁的过期时间,默认是一天,然后因为我们docker环境需要更改参数然后进行后端server服务的重启,我们重启也是比较暴力,就是直接发送kill的信号,导致所有在里面跑的进程瞬间kill,而这时候我们的redis的锁缺还存在,而且是1440分钟左右,那当我们server再启动后,发现锁一直存在,没办法进行后续的操作了,只能等着。

解决

那我把锁的时间减少行不行,原来1天,我改成30分钟,没问题,开始第一版方案我们也是这样做,官方也是可以这样做的。

后来我们一想,能否做到一个监控程序呢,进程退出后立马监控到过期呢,这样就不用固定一个时间,这当然是所有软件开发者理想状态:要你开你就开,我挂了锁也就去掉了,不论正常与否。

解决方案

laravel异步监控定时调度器实例详解

说明:

  • 这里命令启动时候,获取进程的pid,然后fork子进程,可以将这个pid传递给子进程。
  • 子进程每隔10s进行一个探活,获取父进程的id与传入的pid是否一致,这里普及一个知识点,如果父进程异常退出,这个子进程未退出就会被init进程(pid=1)接管,那么这就是一个孤儿进程。
  • 同时子进程每次探活的时候就会更改redis的锁的过期时间,如果探活时间间隔是10s,那么我们的过期时间设置就是14s,多冗余一点时间。

代码实现

代码实现总是那么苍白无力哈,这里就写一个laravel的扩展来做,好处就是不影响我们主体的任何代码就完成了,我们的laravel可以随意升级。

github地址:github.com/zzh78727258…

composer地址:packagist.org/packages/ze…

总结

整体实现没有使用判断进程是否存在的ps grep等命令,因为我们docker环境不一定支持这些命令,只是用简单的pid与parent_id做对比。

laravel的在命令开始于结束都进行钩子方式,我们在Listener下面进行监听即可

public function subscribe($events)
 {
  $events->listen(
   [
    CommandStarting::class, // 命令开始的时候
   ],
   __CLASS__ . '@handle'
  );
 }

整体代码是基于laravel扩展化的,不会影响laravel的升级操作。

好了,以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对三水点靠木的支持。

PHP 相关文章推荐
使用PHP的日期与时间函数技巧
Apr 24 PHP
PHP 一个页面执行时间类代码
Mar 05 PHP
php中取得文件的后缀名?
Feb 20 PHP
php5.3中连接sqlserver2000的两种方法(com与ODBC)
Dec 29 PHP
destoon实现调用图文新闻的方法
Aug 21 PHP
PHP has encountered a Stack overflow问题解决方法
Nov 03 PHP
PHP往XML中添加节点的方法
Mar 12 PHP
PHP中的流(streams)浅析
Jul 02 PHP
PHP动态地创建属性和方法, 对象的复制, 对象的比较,加载指定的文件,自动加载类文件,命名空间
May 06 PHP
php遍历替换目录下文件指定内容的方法
Nov 10 PHP
PHP缓存工具XCache安装与使用方法详解
Apr 09 PHP
thinkPHP5框架接口写法简单示例
Aug 05 PHP
apache集成php7.3.5的详细步骤
Jun 20 #PHP
PHP基础之输出缓冲区基本概念、原理分析
Jun 19 #PHP
PHP进阶学习之Geo的地图定位算法详解
Jun 19 #PHP
PHP进阶学习之依赖注入与Ioc容器详解
Jun 19 #PHP
yii2 在控制器中验证请求参数的使用方法
Jun 19 #PHP
php自定义排序uasort函数示例【二维数组按指定键值排序】
Jun 19 #PHP
windows 2008r2+php5.6.28环境搭建详细过程
Jun 18 #PHP
You might like
PHP新手上路(五)
2006/10/09 PHP
mac下安装nginx和php
2013/11/04 PHP
PHP中文编码小技巧
2014/12/25 PHP
CentOS下PHP7的编译安装及MySQL的支持和一些常见问题的解决办法
2015/12/17 PHP
php实现产品加入购物车功能(1)
2020/07/23 PHP
layui框架实现文件上传及TP3.2.3(thinkPHP)对上传文件进行后台处理操作示例
2018/05/12 PHP
jquery select选中的一个小问题
2009/10/11 Javascript
使用jquery实现select添加实现后台权限添加的效果
2011/05/28 Javascript
jQuery AjaxQueue改进步骤
2011/10/06 Javascript
jQuery EasyUI API 中文文档 - Spinner微调器使用
2011/10/21 Javascript
node.js中的path.normalize方法使用说明
2014/12/08 Javascript
jquery实现带缩略图的可定制高度画廊效果(5种)
2015/08/28 Javascript
js实现商城星星评分的效果
2015/12/29 Javascript
js Canvas实现的日历时钟案例分享
2016/12/25 Javascript
微信小程序实现顶部普通选项卡效果(非swiper)
2020/06/19 Javascript
JS抛物线动画实例制作
2018/02/24 Javascript
ant-design-vue 快速避坑指南(推荐)
2020/01/21 Javascript
JavaScript中的执行环境和作用域链
2020/09/04 Javascript
[03:11]TI9战队档案 - Alliance
2019/08/20 DOTA
[43:03]完美世界DOTA2联赛PWL S2 PXG vs Magma 第二场 11.21
2020/11/24 DOTA
pandas实现将dataframe满足某一条件的值选出
2019/06/12 Python
Django 数据库同步操作技巧详解
2019/07/19 Python
社区版pycharm创建django项目的方法(pycharm的newproject左侧没有项目选项)
2020/09/23 Python
python自动生成证件号的方法示例
2021/01/14 Python
CSS3系列教程:背景图片(背景大小和多背景图) 应用说明
2012/12/19 HTML / CSS
css3实现图片遮罩效果鼠标hover以后出现文字
2013/11/05 HTML / CSS
使用css3 属性如何丰富图片样式(圆角 阴影 渐变)
2012/11/22 HTML / CSS
餐饮业创业计划书范文
2014/01/06 职场文书
小学生倡议书范文
2014/05/13 职场文书
中华在我心中演讲稿
2014/09/13 职场文书
美丽的大脚观后感
2015/06/03 职场文书
2016高中社会实践心得体会范文
2016/01/14 职场文书
创业计划之特色精品店
2019/08/12 职场文书
解决jupyter notebook启动后没有token的坑
2021/04/24 Python
Python编程中Python与GIL互斥锁关系作用分析
2021/09/15 Python
HTML 里 img 元素的 src 和 srcset 属性的区别详解
2023/05/21 HTML / CSS