记一次Django响应超慢的解决过程


Posted in Python onSeptember 17, 2020

在本地windows机器开发的Django项目运行正常,放到服务器上后响应超慢,花了一整个工作日没找到原因(非常绝望),又花了一整个周末才找到原因和临时解决办法,如果你的项目超慢可以参考一下解决思路。

排查过程:

1.怀疑是Python环境问题,到服务器上各种虚拟环境版本进行尝试,无果。

2.因为用了mysql数据库,开始用pymysql包连接改动了一些参数,担心是驱动问题导致数据库查的慢,更换mysqlclient包后,响应依旧慢。 

3.担心是有什么报错导致慢,于是艰难地开启了debug模式(由于用了pymysql所以开启debug模式也会有个报错),开启之后Django反应慢但没有任何报错,绝望~

4.都说用uwsgi中间件部署Django能加快响应速度,尝试之,没用。

5.作为运维人员的思路来了-整个链路监控吧,看看哪个环节慢了。在网上找到了django性能监控工具django-silk,装上之后发现只能看到请求耗时、sql查询耗时,sql查询耗时就几ms,也不慢啊,哭死!

6.是不是模板渲染或者代码有问题导致慢呢?

views.py中新建一个方法,不做任何处理,直接返回一个字符串,依旧慢!

7.从客户端发出请求到views.py处理计算这个过程很慢?

views.py的处理函数中增加print('test'),在浏览器中刷新网页后,查看Django输出,请求后要15s才能看到打印test。 

8.客户端到服务器网络慢?

服务器上新建一个空白的Django项目,运行在相同的端口上,反应正常,网络没问题。 

9.从Django接受到请求到views.py进行逻辑处理中间这个过程很慢!中间经过了django中间件middleware的处理,中间件导致的慢?

依次注释掉能注释的中间件,然后刷请求看浏览器发出请求到Django输出test的延时。

发现注释掉一个自定义的中间件后,Django很快就能输出test(看到了希望)。但是正常业务处理方法响应依旧慢。 

10.自定义中间做了什么,怎么会耗费这么长时间?

查看中间件代码,发现每次请求进来Django进来以后,都要查询数据库,判断当前的url路径是否需要进行认证。

但这也是一次简单的数据库查询而已啊,为什么会这么慢,而且前面django-silk中也显示数据库查询响应很快?

有一点可以肯定的是Django查数据库这个动作耗费了大量的时间! 

11.既然查询数据库这个过程慢,那抓个到数据库的包看一下?

一顿操作后发现,当接收到请求后服务器会给数据库发一点数据,然后过了10多s后又发了一堆数据,等这一堆数据打传输完后浏览器上网页就返回了,这肯定跟响应慢有联系!深挖!

linux上抓包保存到文件,下载到windows上用wireshark分析发现:当Django收到用户请求后,会主动与数据库主机进行tcp连接,三次握手很快就成功了,然后等待了15s才收到MySQL的greet信息,才进行后续的sql查询。这说明服务器很快就与数据库主机建立了连接,但mysql应用等了15s才响应。此处不理解的,可以详细看一下MySQL协议。 

12.由于公司的DB是由DBA负责的,而且现在也是周末,所以暂时没办法继续深挖DB原因。接下来怎么办呢,怎么解决Django响应慢的问题?

在服务器上继续抓包,想对比一下主机上其他应用查询MySQL有什么差异,发现其他应用连接MySQL时一样会有5s的延时。在分析包的过程中发现别的应用会发送ping这样的请求,咦,这不是心跳包吗?别的应用是不是有会话保持啥的?所以没看出来响应慢?

13.给Django也设置一下数据库长连接会话保持试一下?

百度上关于这块的文章都比较老了,都是通过sqlalchemy的连接池管理可以保持数据库的长连接和复用,要改源码操作起来比较麻烦。而且都是Django 1.4时代的解决办法了,现在都Django2.2了,官方有没有提供长连接的机制支持呢?百度和查官方文档后发现配置数据库连接信息时有个可选参数叫“CONN_MAX_AGE”,默认情况下值为0,即数据库查询连接用完之后就释放掉了,新的查询又要重新建立一次连接。

将参数设置为2个小时,再次实验。启动Django后,第一次请求还是很慢,但后面的请求就加快了,问题得到了临时解决!

Todo: 至于数据库为什么要15s才响应连接,这个上班后再找DBA了解具体原因。

寄语:这次问题排查真的很艰难,尝试了各种办法,花了很多时间,终于通过抓包找到了相关的原因。讲真,通过这次问题的排查让我有增加了很多Django的知识!希望能对你有所帮助。

20200531更新:连接mysql慢的原因

为什么mysql响应这么慢,百度一番后发现原因

mysql建立连接之前会根据连接的ip反向查找对应的主机名,这一步会涉及DNS反向解析(如果本地hosts文件没有指定就会找其他服务器查询),这个过程会消耗时间。

于是登陆数据库所在主机,通过命令"nslookup IP地址"分别查询本地IP和服务器IP,本地IP查询结果很快返回(不在一个网段找不到),服务器IP结果非常慢直到超时否没返回,这就解释了为什么前文【windows机器反应快,linux反应慢】的问题。至于为什么反向解析服务器IP这么慢,这个问题就不再继续挖下去了,应该是网管没有配置好相关的解析吧。

解决办法:禁用反向解析,找到mysql的配置文件/etc/my.cnf,增加一行配置,重启以后数据库响应速度就完美了。

[mysqld]
skip-name-resolve

既然这个反向解析这么耗时,为什么还要有这个流程呢?

还记得mysql的授权命令吗:

grant all priviledges on *.* to "user"@"%" identified by "pass"

@后面的%就代表任意的主机名和ip地址,对!这个地方是可以根据主机名来授权的,如果把反向DNS解析关掉了,这里就会有问题,授权的时候就只能根据ip进行授权啦~

到此这篇关于记一次Django响应超慢的解决过程的文章就介绍到这了,更多相关Django响应超慢内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

Python 相关文章推荐
在Python中的Django框架中进行字符串翻译
Jul 27 Python
python append、extend与insert的区别
Oct 13 Python
详解Golang 与python中的字符串反转
Jul 21 Python
Python3计算三角形的面积代码
Dec 18 Python
Python使用wxPython实现计算器
Jan 30 Python
python实时检测键盘输入函数的示例
Jul 17 Python
Python基础之字符串操作常用函数集合
Feb 09 Python
将自己的数据集制作成TFRecord格式教程
Feb 17 Python
python框架Django实战商城项目之工程搭建过程图文详解
Mar 09 Python
Jupyter Notebook输出矢量图实例
Apr 14 Python
通过代码实例解析Pytest运行流程
Aug 20 Python
python实现简单倒计时功能
Apr 21 Python
Visual Studio Code搭建django项目的方法步骤
Sep 17 #Python
Windows下pycharm安装第三方库失败(通用解决方案)
Sep 17 #Python
PyCharm中关于安装第三方包的三个建议
Sep 17 #Python
Scrapy项目实战之爬取某社区用户详情
Sep 17 #Python
django跳转页面传参的实现
Sep 17 #Python
解决Ubuntu18中的pycharm不能调用tensorflow-gpu的问题
Sep 17 #Python
Django mysqlclient安装和使用详解
Sep 17 #Python
You might like
解析php mysql 事务处理回滚操作(附实例)
2013/08/05 PHP
PHP实现微信公众平台音乐点播
2014/03/20 PHP
PHP页面实现定时跳转的方法
2014/10/31 PHP
php中$_GET与$_POST过滤sql注入的方法
2014/11/03 PHP
php关闭warning问题的解决方法
2016/05/17 PHP
实例介绍PHP删除数组中的重复元素
2019/03/03 PHP
JavaScript Undefined,Null类型和NaN值区别
2008/10/22 Javascript
js 面向对象的技术创建高级 Web 应用程序
2010/02/25 Javascript
js获取单元格自定义属性值的代码(IE/Firefox)
2010/04/05 Javascript
jQuery dialog 异步调用ashx,webservice数据的代码
2010/08/03 Javascript
javascript写的日历类(基于pj)
2010/12/28 Javascript
js中有关IE版本检测
2012/01/04 Javascript
ajax页面无刷新 IE下遭遇Ajax缓存导致数据不更新的问题
2012/12/11 Javascript
JQuery实现用户名无刷新验证的小例子
2013/03/22 Javascript
document.documentElement的一些使用技巧
2013/04/18 Javascript
js Array对象的扩展函数代码
2013/04/24 Javascript
jQuery动画出现连续触发、滞后反复执行的解决方法
2015/01/28 Javascript
Bootstrap 过渡效果Transition 模态框(Modal)
2017/03/17 Javascript
详谈js遍历集合(Array,Map,Set)
2017/04/06 Javascript
angular中使用Socket.io实例代码
2017/06/03 Javascript
浅谈Angularjs中不同类型的双向数据绑定
2018/07/16 Javascript
vue 实现Web端的定位功能 获取经纬度
2019/08/08 Javascript
javascript实现视频弹幕效果(两个版本)
2019/11/28 Javascript
Vue-resource安装过程及使用方法解析
2020/07/21 Javascript
nodejs中使用worker_threads来创建新的线程的方法
2021/01/22 NodeJs
基于JavaScript实现随机点名器
2021/02/25 Javascript
对python中使用requests模块参数编码的不同处理方法
2018/05/18 Python
python 循环读取txt文档 并转换成csv的方法
2018/10/26 Python
pandas 转换成行列表进行读取与Nan处理的方法
2018/10/30 Python
通过python的matplotlib包将Tensorflow数据进行可视化的方法
2019/01/09 Python
详解numpy.meshgrid()方法使用
2019/08/01 Python
python右对齐的实例方法
2020/07/05 Python
春秋航空官方网站:Spring Airlines
2017/09/27 全球购物
单位员工收入证明样本
2014/10/09 职场文书
2015年八一建军节慰问信
2015/03/23 职场文书
MySQL数据库如何给表设置约束详解
2022/03/13 MySQL