python自动结束mysql慢查询会话的实例代码


Posted in Python onOctober 27, 2019

生产环境的有些sql查询写得太复杂,或是表很大,对应索引未建立或建立不合理,或是查询未充分使用索引等,就有可能出现慢查询,一些慢查询需要修改程序,可能没那么快能解决,这时如果有个脚本能自动检测符合条件的慢查询会话并结束,那么是很方便的,当然运维人员也可顺便弄个检测慢查询并告警的脚本。

涉及知识点

  • mysql慢查询会话查询
  • schedule定时任务调度
  • pymysql执行sql

代码分解

mysql慢查询

#会话查询,只能查询所有会话,不能按条件过滤,不过比较好记
show PROCESSLIST;
#从information_schema中查询会话,可以按条件过滤
SELECT
 *
FROM
 information_schema.`PROCESSLIST`;
#查询符合条件的慢会话,id是会话ID,info是正在执行的sql,time是会话持续时间,杀会话时注意要做好过滤
SELECT
 id,
 info,
 time
FROM
 information_schema.`PROCESSLIST`
WHERE
 info LIKE '%select * from table%'
AND time > 10;
#直接使用sql批量杀会话,拼接kill xxx;后,拷贝了在控制台执行
SELECT
 concat('KILL ', id, ';')
FROM
 information_schema.`PROCESSLIST`
WHERE
 info LIKE '%select * from table%'
AND time > 10;

脚本主入口

if __name__ == '__main__':
 #每5秒执行检查任务
 schedule.every(5).seconds.do(kill_slow)
 #此处固定写法,意思是每秒钟schedule看下是否有pending的任务,有就执行
 while True:
  schedule.run_pending()
  time.sleep(1)
schedule的其它示例
import schedule
import time
def job(message='stuff'):
 print("I'm working on:", message)
#每10分钟
schedule.every(10).minutes.do(job)
#每小时
schedule.every().hour.do(job, message='things')
#每天10点30分
schedule.every().day.at("10:30").do(job)
while True:
 schedule.run_pending()
 time.sleep(1)

pymysql使用

# 连接数据库,设置结果集用dict返回,autocommit自动提交事务
db = pymysql.connect(host='localhost', db='dbname',
      user='root', passwd='admin',
      port=3306, charset='utf8',
      cursorclass=pymysql.cursors.DictCursor, autocommit=True)
cursor = db.cursor()

查询符合条件的慢会话并结束

def kill_slow():
  cursor.execute(
    """
    SELECT
      id,
      info,
      time
    FROM
      information_schema.`PROCESSLIST`
    WHERE
      info LIKE '%select * from table%'
    AND time > 10;
    """)
  slow_sessions = cursor.fetchall()
  for slow_session in slow_sessions:
    print("slow session detected, kill it:\n id:%s\nsql:%s" % (
      slow_session[0], slow_session[1]))
    cursor.execute("kill %s", slow_session[0])

完整代码

import time
import pymysql
import schedule
# 连接数据库,设置结果集用dict返回,autocommit自动提交事务
db = pymysql.connect(host='localhost', db='dbname',
           user='root', passwd='admin',
           port=3306, charset='utf8',
           cursorclass=pymysql.cursors.DictCursor, autocommit=True)
cursor = db.cursor()
def kill_slow():
  cursor.execute(
    """
    SELECT
      id,
      info,
      time
    FROM
      information_schema.`PROCESSLIST`
    WHERE
      info LIKE '%select * from table%'
    AND time > 10;
    """)
  slow_sessions = cursor.fetchall()
  for slow_session in slow_sessions:
    print("slow session detected, kill it:\n id:%s\nsql:%s" % (
      slow_session[0], slow_session[1]))
    cursor.execute("kill %s", slow_session[0])
if __name__ == '__main__':
  # 每5秒执行检查任务
  schedule.every(5).seconds.do(kill_slow)
  # 此处固定写法,意思是每秒钟schedule看下是否有pending的任务,有就执行
  while True:
    schedule.run_pending()
    time.sleep(1)

总结

以上所述是小编给大家介绍的python自动结束mysql慢查询会话的实例代码,希望对大家有所帮助!

Python 相关文章推荐
Python标准库与第三方库详解
Jul 22 Python
使用Nginx+uWsgi实现Python的Django框架站点动静分离
Mar 21 Python
python 出现SyntaxError: non-keyword arg after keyword arg错误解决办法
Feb 14 Python
python 获取一个值在某个区间的指定倍数的值方法
Nov 12 Python
Python----数据预处理代码实例
Mar 20 Python
Python Gitlab Api 使用方法
Aug 28 Python
python实现的多任务版udp聊天器功能案例
Nov 13 Python
pytorch 实现cross entropy损失函数计算方式
Jan 02 Python
基于python3生成标签云代码解析
Feb 18 Python
python 中不同包 类 方法 之间的调用详解
Mar 09 Python
基于Keras的格式化输出Loss实现方式
Jun 17 Python
分析Python list操作为什么会错误
Nov 17 Python
python实现输入任意一个大写字母生成金字塔的示例
Oct 27 #Python
python 爬虫百度地图的信息界面的实现方法
Oct 27 #Python
python用类实现文章敏感词的过滤方法示例
Oct 27 #Python
通过字符串导入 Python 模块的方法详解
Oct 27 #Python
python实现树的深度优先遍历与广度优先遍历详解
Oct 26 #Python
python图的深度优先和广度优先算法实例分析
Oct 26 #Python
python单例模式原理与创建方法实例分析
Oct 26 #Python
You might like
解析link_mysql的php版
2013/06/30 PHP
PHP中设置一个严格30分钟过期Session面试题的4种答案
2014/07/30 PHP
laravel 5异常错误:FatalErrorException in Handler.php line 38的解决
2017/10/12 PHP
Django 标签筛选的实现代码(一对多、多对多)
2018/09/05 PHP
laravel 框架配置404等异常页面
2019/01/07 PHP
PHP+Oracle本地开发环境搭建方法详解
2019/04/01 PHP
js AppendChild与insertBefore用法详细对比
2013/12/16 Javascript
js的参数有长度限制吗?发现不能超过2083个字符
2014/04/20 Javascript
jQuery选择器简明总结(含用法实例,一目了然)
2014/04/25 Javascript
jQuery 处理页面的事件详解
2015/01/20 Javascript
Vue.js每天必学之构造器与生命周期
2016/09/05 Javascript
详解vue父子模版嵌套案例
2017/03/04 Javascript
react-router JS 控制路由跳转实例
2017/06/15 Javascript
用node和express连接mysql实现登录注册的实现代码
2017/07/05 Javascript
微信小程序request请求封装,验签代码实例
2019/12/04 Javascript
js实现提交前对列表数据的增删改查
2020/01/16 Javascript
Python中编写ORM框架的入门指引
2015/04/29 Python
Python中的字符串类型基本知识学习教程
2016/02/04 Python
python3批量删除豆瓣分组下的好友的实现代码
2016/06/07 Python
对python使用telnet实现弱密码登录的方法详解
2019/01/26 Python
Django中间件拦截未登录url实例详解
2019/09/03 Python
python requests包的request()函数中的参数-params和data的区别介绍
2020/05/05 Python
Python常用模块函数代码汇总解析
2020/08/31 Python
瑞典最好的运动鞋专卖店:Sneakersnstuff
2016/08/29 全球购物
俄罗斯卫浴采暖及维修用品超级市场:Dkrussia
2020/05/12 全球购物
函授自我鉴定范文
2014/02/06 职场文书
大学社团活动总结
2014/04/26 职场文书
初中升旗仪式演讲稿
2014/05/08 职场文书
公司捐款倡议书
2014/05/14 职场文书
企业务虚会发言材料
2014/10/20 职场文书
化工见习报告范文
2014/10/31 职场文书
自我检讨报告
2015/01/28 职场文书
涪陵白鹤梁导游词
2015/02/09 职场文书
个人年终总结结尾
2015/03/06 职场文书
python异常中else的实例用法
2021/06/15 Python
如何基于python实现单目三维重建详解
2022/06/25 Python