laravel异步监控定时调度器实例详解


Posted in PHP onJune 21, 2019

定时调度器是什么

laravel默认提供了一个命令定时任务的功能,在其他的php框架下面,没有这个定时任务,我们要跑一些异步脚本怎么操作呢,只能依赖我们系统提供的crontab来做,这就导致我们每次发版本新增定时任务都要去服务器更改crontab代码,获取更新这个配置。

执行命令是php artisan schedule:run 来执行,那放在哪里执行呢,没错这个调起还是需要依赖我们crontab来执行,但是只需要配置一次,后续所有定时任务都在我们业务代码进行控制

场景

我们有一个导入数据的定时任务

//每分钟导入库数据
$schedule->command(self::SIGNATURE)->withoutOverlapping()->everyMinute()->runInBackground();

这里导入长时间最好使用runInBackground(),表示异步执行,其实就是在shell脚本的末尾加上 & 符号,在linux上完全依赖系统的方式完成。

这里使用了withoutOverlapping() 表示在同一时刻只能有一个任务执行,主要逻辑使用的是排它锁实现,依赖于我们cache的driver,我这里使用的是redis,后面作为锁的过期直接redis提供的key过期来做。

出现问题

这个任务在正常情况下都是非常完美的,因为同一时刻只有一个再跑,跑完就可以,但是一个场景出现
有一天我们的qa同学刚部署环境后,我们服务端就在默默的导入库了,因为使用withoutOverlapping($expire_at=1440)这个时候在redis就有一个锁产生了,这个默认带参数是锁的过期时间,默认是一天,然后因为我们docker环境需要更改参数然后进行后端server服务的重启,我们重启也是比较暴力,就是直接发送kill的信号,导致所有在里面跑的进程瞬间kill,而这时候我们的redis的锁缺还存在,而且是1440分钟左右,那当我们server再启动后,发现锁一直存在,没办法进行后续的操作了,只能等着。

解决

那我把锁的时间减少行不行,原来1天,我改成30分钟,没问题,开始第一版方案我们也是这样做,官方也是可以这样做的。

后来我们一想,能否做到一个监控程序呢,进程退出后立马监控到过期呢,这样就不用固定一个时间,这当然是所有软件开发者理想状态:要你开你就开,我挂了锁也就去掉了,不论正常与否。

解决方案

laravel异步监控定时调度器实例详解

说明:

  • 这里命令启动时候,获取进程的pid,然后fork子进程,可以将这个pid传递给子进程。
  • 子进程每隔10s进行一个探活,获取父进程的id与传入的pid是否一致,这里普及一个知识点,如果父进程异常退出,这个子进程未退出就会被init进程(pid=1)接管,那么这就是一个孤儿进程。
  • 同时子进程每次探活的时候就会更改redis的锁的过期时间,如果探活时间间隔是10s,那么我们的过期时间设置就是14s,多冗余一点时间。

代码实现

代码实现总是那么苍白无力哈,这里就写一个laravel的扩展来做,好处就是不影响我们主体的任何代码就完成了,我们的laravel可以随意升级。

github地址:github.com/zzh78727258…

composer地址:packagist.org/packages/ze…

总结

整体实现没有使用判断进程是否存在的ps grep等命令,因为我们docker环境不一定支持这些命令,只是用简单的pid与parent_id做对比。

laravel的在命令开始于结束都进行钩子方式,我们在Listener下面进行监听即可

public function subscribe($events)
 {
  $events->listen(
   [
    CommandStarting::class, // 命令开始的时候
   ],
   __CLASS__ . '@handle'
  );
 }

整体代码是基于laravel扩展化的,不会影响laravel的升级操作。

好了,以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对三水点靠木的支持。

PHP 相关文章推荐
php下mysql数据库操作类(改自discuz)
Jul 03 PHP
基于php常用正则表达式的整理汇总
Jun 08 PHP
PHP登陆后跳转到登陆前页面实现思路及代码
Jan 17 PHP
PHP网页游戏学习之Xnova(ogame)源码解读(十)
Jun 24 PHP
php实现判断访问来路是否为搜索引擎机器人的方法
Apr 15 PHP
100多行PHP代码实现socks5代理服务器[2]
May 05 PHP
php版微信数据统计接口用法示例
Oct 12 PHP
php文件包含目录配置open_basedir的使用与性能详解
Apr 03 PHP
PHP编程快速实现数组去重的方法详解
Jul 22 PHP
PHP+redis实现的限制抢购防止商品超发功能详解
Sep 19 PHP
php使用fputcsv实现大数据的导出操作详解
Feb 27 PHP
数据结构之利用PHP实现二分搜索树
Oct 25 PHP
apache集成php7.3.5的详细步骤
Jun 20 #PHP
PHP基础之输出缓冲区基本概念、原理分析
Jun 19 #PHP
PHP进阶学习之Geo的地图定位算法详解
Jun 19 #PHP
PHP进阶学习之依赖注入与Ioc容器详解
Jun 19 #PHP
yii2 在控制器中验证请求参数的使用方法
Jun 19 #PHP
php自定义排序uasort函数示例【二维数组按指定键值排序】
Jun 19 #PHP
windows 2008r2+php5.6.28环境搭建详细过程
Jun 18 #PHP
You might like
PHP目录函数实现创建、读取目录教程实例
2011/01/13 PHP
PHP准确取得服务器IP地址的方法
2015/06/02 PHP
WordPress中缩略图的使用以及相关技巧
2015/11/24 PHP
JavaScript 不只是脚本
2007/05/30 Javascript
jquery $.each()使用探讨
2013/09/23 Javascript
js实现按一下删除键删除整个单词附demo
2014/09/05 Javascript
javascript面向对象之对象的深入理解
2015/01/13 Javascript
谈谈js中的prototype及prototype属性解释和常用方法
2015/11/25 Javascript
js纯数字逐一停止显示效果的实现代码
2016/03/16 Javascript
AngularJs入门教程之环境搭建+创建应用示例
2016/11/01 Javascript
jQuery菜单实例(全选,反选,取消)
2017/08/28 jQuery
js 提取某()特殊字符串长度的实例
2017/12/06 Javascript
angular6.0开发教程之如何安装angular6.0框架
2018/06/29 Javascript
vue 登录滑动验证实现代码
2018/08/24 Javascript
vue实现form表单与table表格的数据关联功能示例
2019/01/29 Javascript
vue组件定义,全局、局部组件,配合模板及动态组件功能示例
2019/03/19 Javascript
vant中的toast轻提示实现代码
2020/11/04 Javascript
深入解析Python中的上下文管理器
2016/06/28 Python
Python编程实现及时获取新邮件的方法示例
2017/08/10 Python
python简单图片操作:打开\显示\保存图像方法介绍
2017/11/23 Python
Python实现的rsa加密算法详解
2018/01/24 Python
使用Python监控文件内容变化代码实例
2018/06/04 Python
python之pymysql模块简单应用示例代码
2019/12/16 Python
python range实例用法分享
2020/02/06 Python
python numpy生成等差数列、等比数列的实例
2020/02/25 Python
python之pygame模块实现飞机大战完整代码
2020/11/29 Python
伊利莎白雅顿官网:Elizabeth Arden
2016/10/10 全球购物
JYSK加拿大:购买家具、床垫、家居装饰等
2020/02/14 全球购物
前台文员职责范本
2014/03/07 职场文书
施工安全责任书范本
2014/07/24 职场文书
工会积极分子个人总结
2015/03/03 职场文书
销售员岗位职责范本
2015/04/11 职场文书
车间统计员岗位职责
2015/04/14 职场文书
2015年干部教育培训工作总结
2015/05/15 职场文书
javascript遍历对象的五种方式实例代码
2021/10/24 Javascript
golang连接MySQl使用sqlx库
2022/04/14 Golang