在 Python 中接管键盘中断信号的实现方法


Posted in Python onFebruary 04, 2020

在 Python 中接管键盘中断信号的实现方法

假设有这样一个需求,你需要从 Redis 中持续不断读取数据,并把这些数据写入到 MongoDB 中。你可能会这样写代码:

import json 
import redis 
import pymongo 
client = redis.Redis() 
handler = pymongo.MongoClient().example.col 
while True: 
  data_raw = client.blpop('data', timeout=300) 
  if not data_raw: 
    continue 
  data = json.loads(data_raw[1].decode()) 
  handler.insert_one(data)

但这样写有一个问题,就是每来一条数据都要连接一次 MongoDB,大量时间浪费在了网络 I/O上。

于是大家会把代码改成下面这样:

import json 
import redis 
import pymongo 
client = redis.Redis() 
handler = pymongo.MongoClient().example.col 
to_be_insert = [] 
while True: 
  data_raw = client.blpop('data', timeout=300) 
  if not data_raw: 
    continue 
  data = json.loads(data_raw[1].decode()) 
  to_be_insert.append(data) 
  if len(to_be_insert) >= 1000: 
    handler.insert_many(to_be_insert) 
    to_be_insert = []

每凑够1000条数据,批量写入到 MongoDB 中。

现在又面临另外一个问题。假设因为某种原因,我需要更新这个程序,于是我按下了键盘上的Ctrl + C强制关闭了这个程序。而此时to_be_insert列表里面有999条数据将会永久丢失——它们已经被从 Redis 中删除了,但又没有来得及写入 MongoDB 中。

我想实现,当我按下 Ctrl + C 时,程序不再从 Redis 中读取数据,但会先把to_be_insert中的数据(无论有几条)都插入 MongoDB 中。最后再关闭程序。

要实现这个需求,就必须在我们按下Ctrl + C时,程序还能继续运行一段代码。可问题是按下Ctrl + C时,程序就直接结束了,如何还能再运行一段代码?

实际上,当我们按下键盘上的Ctrl + C时,Python 收到一个名为SIGINT的信号。具体规则可以阅读官方文档。收到信号以后,Python 会调用一个信号回调函数。只不过默认的回调函数就是让程序抛出一个 KeyboardInterrupt异常导致程序关闭。现在,我们可以设法让 Python 使用我们自定义的一段函数来作为信号回调函数。

要使用信号,我们需用导入 Python 的signal库。然后自定义一个信号回调函数,当 Python 收到某个信号时,调用这个函数。

所以我们修改一下上面的代码:

import signal 
import json 
import redis 
import pymongo 
 
 
client = redis.Redis() 
handler = pymongo.MongoClient().example.col 
stop = False 
 
 
def keyboard_handler(signum, frame): 
  global stop 
  stop = True 
 
 
signal.signal(signal.SIGINT, keyboard_handler) 
 
to_be_insert = [] 
while not stop: 
  data_raw = client.blpop('data', timeout=300) 
  if not data_raw: 
    continue 
  data = json.loads(data_raw[1].decode()) 
  to_be_insert.append(data) 
  if len(to_be_insert) >= 1000: 
    handler.insert_many(to_be_insert) 
    to_be_insert = [] 
 
if to_be_insert: 
  handler.insert_many(to_be_insert)

我们定义了一个全局变量stop,默认为 False,所以默认情况下,while not stop所在的循环体会持续运行。

我们定义了一个函数keyboard_handler,它的作用是修改全局变量stop为 True。需要注意的是,在函数里面修改全局变量,必须先使用global 变量名声明这个变量为全局变量。否则无法修改。

修改以后,while not stop循环停止,于是程序进入:

if to_be_insert: 
  handler.insert_many(to_be_insert)

只要列表里面有数据,就会批量插入 MongoDB 中。然后程序结束。

整段代码的关键就在signal.signal(signal.SIGINT, keyboard_handler)这里把信号SIGINT与函数keyboard_handler关联上了,于是,在上面这段代码运行的任何时候,只要按下键盘的Ctrl + C,程序就会进入keyboard_handler函数里面,优先执行这个函数里面的代码。执行完成以后,回到之前中断的地方,继续执行之前没有完成的代码。而由于在函数里面我已经修改了stop的值,所以原来的循环不能继续执行,于是进入最后的收尾工作。

需要注意的是,如果你的整个代码全都是使用 Python 写的,那么 signal可以在你程序的任何阶段触发,只要你按下 Ctrl + C,立刻就会进入设置好的信号回调函数中。

但如果你的代码中,有一部分代码是使用 C 语言写的,那么当你按下Ctrl + C以后,可能需要等这段C 语言的代码运行完成以后,才会进入你设置的信号回调函数中。

总结

以上所述是小编给大家介绍的在 Python 中接管键盘中断信号的处理方法,希望对大家有所帮助!

Python 相关文章推荐
wxPython 入门教程
Oct 07 Python
用Python制作简单的朴素基数估计器的教程
Apr 01 Python
高质量Python代码编写的5个优化技巧
Nov 16 Python
pandas.DataFrame 根据条件新建列并赋值的方法
Apr 08 Python
Python创建普通菜单示例【基于win32ui模块】
May 09 Python
pycharm下查看python的变量类型和变量内容的方法
Jun 26 Python
python使用PyQt5的简单方法
Feb 27 Python
Python判断两个文件是否相同与两个文本进行相同项筛选的方法
Mar 01 Python
Python箱型图处理离群点的例子
Dec 09 Python
keras多显卡训练方式
Jun 10 Python
matplotlib图例legend语法及设置的方法
Jul 28 Python
python单元测试框架pytest的使用示例
Oct 07 Python
在TensorFlow中屏蔽warning的方式
Feb 04 #Python
Python和Anaconda和Pycharm安装教程图文详解
Feb 04 #Python
Python3.7黑帽编程之病毒篇(基础篇)
Feb 04 #Python
python with (as)语句实例详解
Feb 04 #Python
Python实现实时数据采集新型冠状病毒数据实例
Feb 04 #Python
在tensorflow中实现屏蔽输出的log信息
Feb 04 #Python
Python变量作用域LEGB用法解析
Feb 04 #Python
You might like
php header功能的使用
2013/10/28 PHP
使用php转义输出HTML到JavaScript
2015/03/27 PHP
PDO::quote讲解
2019/01/29 PHP
Javascript 兼容firefox的一些问题
2009/05/21 Javascript
显示js对象所有属性和方法的函数
2009/10/16 Javascript
JavaScript中定义函数的三种方法
2015/03/12 Javascript
JavaScript判断用户是否对表单进行了修改的方法
2015/03/18 Javascript
jQuery实现的指纹扫描效果实例(附演示与demo源码下载)
2016/01/26 Javascript
jQuery插件ajaxfileupload.js实现上传文件
2020/10/23 Javascript
JS实现的简单图片切换功能示例【测试可用】
2017/02/14 Javascript
使用原生js写ajax实例(推荐)
2017/05/31 Javascript
Javascript之图片的延迟加载的实例详解
2017/07/24 Javascript
vue-router路由懒加载和权限控制详解
2017/12/13 Javascript
使用veloticy-ui生成文字动画效果
2018/02/08 Javascript
教你如何用node连接redis的示例代码
2018/07/12 Javascript
微信小程序修改swiper默认指示器样式的实例代码
2018/07/18 Javascript
基于JS抓取某高校附近共享单车位置 使用web方式展示位置变化代码实例
2019/08/27 Javascript
24行JavaScript代码实现Redux的方法实例
2019/11/17 Javascript
JS基础之逻辑结构与循环操作示例
2020/01/19 Javascript
Vue将props值实时传递 并可修改的操作
2020/08/09 Javascript
[02:54]DOTA2英雄基础教程 撼地者
2014/01/14 DOTA
[53:15]Newbee vs Pain 2018国际邀请赛小组赛BO2 第二场 8.16
2018/08/17 DOTA
Tensorflow 自带可视化Tensorboard使用方法(附项目代码)
2018/02/10 Python
pandas将DataFrame的列变成行索引的方法
2018/04/10 Python
Python利用heapq实现一个优先级队列的方法
2019/02/03 Python
详解python列表(list)的使用技巧及高级操作
2019/08/15 Python
python生成并处理uuid的实现方式
2020/03/03 Python
PyQt5 如何让界面和逻辑分离的方法
2020/03/24 Python
python输出国际象棋棋盘的实例分享
2020/11/26 Python
在python3.9下如何安装scrapy的方法
2021/02/03 Python
Html5 语法与规则简要概述
2014/07/29 HTML / CSS
商场消防演习方案
2014/02/12 职场文书
高三复习计划
2015/01/19 职场文书
2016领导干部廉洁自律心得体会
2016/01/13 职场文书
作文之亲情600字
2019/09/23 职场文书
Java使用jmeter进行压力测试
2021/07/09 Java/Android