python自动结束mysql慢查询会话的实例代码


Posted in Python onOctober 27, 2019

生产环境的有些sql查询写得太复杂,或是表很大,对应索引未建立或建立不合理,或是查询未充分使用索引等,就有可能出现慢查询,一些慢查询需要修改程序,可能没那么快能解决,这时如果有个脚本能自动检测符合条件的慢查询会话并结束,那么是很方便的,当然运维人员也可顺便弄个检测慢查询并告警的脚本。

涉及知识点

  • mysql慢查询会话查询
  • schedule定时任务调度
  • pymysql执行sql

代码分解

mysql慢查询

#会话查询,只能查询所有会话,不能按条件过滤,不过比较好记
show PROCESSLIST;
#从information_schema中查询会话,可以按条件过滤
SELECT
 *
FROM
 information_schema.`PROCESSLIST`;
#查询符合条件的慢会话,id是会话ID,info是正在执行的sql,time是会话持续时间,杀会话时注意要做好过滤
SELECT
 id,
 info,
 time
FROM
 information_schema.`PROCESSLIST`
WHERE
 info LIKE '%select * from table%'
AND time > 10;
#直接使用sql批量杀会话,拼接kill xxx;后,拷贝了在控制台执行
SELECT
 concat('KILL ', id, ';')
FROM
 information_schema.`PROCESSLIST`
WHERE
 info LIKE '%select * from table%'
AND time > 10;

脚本主入口

if __name__ == '__main__':
 #每5秒执行检查任务
 schedule.every(5).seconds.do(kill_slow)
 #此处固定写法,意思是每秒钟schedule看下是否有pending的任务,有就执行
 while True:
  schedule.run_pending()
  time.sleep(1)
schedule的其它示例
import schedule
import time
def job(message='stuff'):
 print("I'm working on:", message)
#每10分钟
schedule.every(10).minutes.do(job)
#每小时
schedule.every().hour.do(job, message='things')
#每天10点30分
schedule.every().day.at("10:30").do(job)
while True:
 schedule.run_pending()
 time.sleep(1)

pymysql使用

# 连接数据库,设置结果集用dict返回,autocommit自动提交事务
db = pymysql.connect(host='localhost', db='dbname',
      user='root', passwd='admin',
      port=3306, charset='utf8',
      cursorclass=pymysql.cursors.DictCursor, autocommit=True)
cursor = db.cursor()

查询符合条件的慢会话并结束

def kill_slow():
  cursor.execute(
    """
    SELECT
      id,
      info,
      time
    FROM
      information_schema.`PROCESSLIST`
    WHERE
      info LIKE '%select * from table%'
    AND time > 10;
    """)
  slow_sessions = cursor.fetchall()
  for slow_session in slow_sessions:
    print("slow session detected, kill it:\n id:%s\nsql:%s" % (
      slow_session[0], slow_session[1]))
    cursor.execute("kill %s", slow_session[0])

完整代码

import time
import pymysql
import schedule
# 连接数据库,设置结果集用dict返回,autocommit自动提交事务
db = pymysql.connect(host='localhost', db='dbname',
           user='root', passwd='admin',
           port=3306, charset='utf8',
           cursorclass=pymysql.cursors.DictCursor, autocommit=True)
cursor = db.cursor()
def kill_slow():
  cursor.execute(
    """
    SELECT
      id,
      info,
      time
    FROM
      information_schema.`PROCESSLIST`
    WHERE
      info LIKE '%select * from table%'
    AND time > 10;
    """)
  slow_sessions = cursor.fetchall()
  for slow_session in slow_sessions:
    print("slow session detected, kill it:\n id:%s\nsql:%s" % (
      slow_session[0], slow_session[1]))
    cursor.execute("kill %s", slow_session[0])
if __name__ == '__main__':
  # 每5秒执行检查任务
  schedule.every(5).seconds.do(kill_slow)
  # 此处固定写法,意思是每秒钟schedule看下是否有pending的任务,有就执行
  while True:
    schedule.run_pending()
    time.sleep(1)

总结

以上所述是小编给大家介绍的python自动结束mysql慢查询会话的实例代码,希望对大家有所帮助!

Python 相关文章推荐
Python 异常处理的实例详解
Sep 11 Python
Python数据处理numpy.median的实例讲解
Apr 02 Python
python 识别图片中的文字信息方法
May 10 Python
python画折线图的程序
Jul 26 Python
Python除法之传统除法、Floor除法及真除法实例详解
May 23 Python
python+opencv实现摄像头调用的方法
Jun 22 Python
用python做游戏的细节详解
Jun 25 Python
Python 使用 Pillow 模块给图片添加文字水印的方法
Aug 30 Python
关于Python3 lambda函数的深入浅出
Nov 27 Python
python 中的[:-1]和[::-1]的具体使用
Feb 13 Python
python matplotlib包图像配色方案分享
Mar 14 Python
详解Python3 定义一个跨越多行的字符串的多种方法
Sep 06 Python
python实现输入任意一个大写字母生成金字塔的示例
Oct 27 #Python
python 爬虫百度地图的信息界面的实现方法
Oct 27 #Python
python用类实现文章敏感词的过滤方法示例
Oct 27 #Python
通过字符串导入 Python 模块的方法详解
Oct 27 #Python
python实现树的深度优先遍历与广度优先遍历详解
Oct 26 #Python
python图的深度优先和广度优先算法实例分析
Oct 26 #Python
python单例模式原理与创建方法实例分析
Oct 26 #Python
You might like
一个MYSQL操作类
2006/11/16 PHP
php中经典方法实现判断多维数组是否为空
2011/10/23 PHP
深入for,while,foreach遍历时间比较的详解
2013/06/08 PHP
PHP支付系统设计与典型案例分享
2016/08/02 PHP
PHP实现新型冠状病毒疫情实时图的实例
2020/02/04 PHP
JavaScript中的排序算法代码
2011/02/22 Javascript
Javascript操作cookie的函数代码
2012/10/03 Javascript
JavaScript中的Web worker多线程API研究
2014/12/06 Javascript
node.js中的fs.writeFileSync方法使用说明
2014/12/14 Javascript
浏览器兼容性问题大汇总
2015/12/17 Javascript
jQuery简单获取DIV和A标签元素位置的方法
2017/02/07 Javascript
JS回调函数简单用法示例
2017/02/09 Javascript
vue-router跳转页面的方法
2017/02/09 Javascript
JavaScript数据结构之二叉查找树的定义与表示方法
2017/04/12 Javascript
Vue封装的组件全局注册并引用
2019/07/24 Javascript
微信小程序中限制激励式视频广告位显示次数(实现思路)
2019/12/06 Javascript
[52:37]完美世界DOTA2联赛循环赛 Forest vs DM BO2第一场 10.29
2020/10/29 DOTA
Python3实现从指定路径查找文件的方法
2015/05/22 Python
python3音乐播放器简单实现代码
2020/04/20 Python
python2 与python3的print区别小结
2018/01/16 Python
解决python中遇到字典里key值为None的情况,取不出来的问题
2018/10/17 Python
Python3爬虫爬取英雄联盟高清桌面壁纸功能示例【基于Scrapy框架】
2018/12/05 Python
python实现祝福弹窗效果
2019/04/07 Python
远程部署工具Fabric详解(支持Python3)
2019/07/04 Python
利用python-docx模块写批量生日邀请函
2019/08/26 Python
基于python SMTP实现自动发送邮件教程解析
2020/06/02 Python
Python faker生成器生成虚拟数据代码实例
2020/07/20 Python
基于Python实现简单学生管理系统
2020/07/24 Python
波比布朗英国官网:Bobbi Brown英国
2017/11/13 全球购物
西班牙最大的婴儿用品网上商店:Bebitus
2019/05/30 全球购物
全球最受追捧的运动服品牌领先数字目的地:Stylerunner
2020/11/25 全球购物
95%的面试官都会问到的50道Java线程题,附答案
2012/08/03 面试题
物流仓储计划书
2014/01/10 职场文书
婚礼领导致辞大全
2015/07/28 职场文书
2019升学宴主持词范本5篇
2019/10/09 职场文书
Python torch.flatten()函数案例详解
2021/08/30 Python