Python使用urllib模块的urlopen超时问题解决方法


Posted in Python onNovember 08, 2014

在新的公司开始上班,今天工作的主题内容是市场部门需要抓取一些论坛用户的邮箱,以便发送营销邮件。

于是用了一个python脚本来执行,前面抓了几个都没有什么问题,后来碰到一个论坛,在执行urlopen的地方总是提示超时,百度了一下,因为我使用的是urllib不是urllib2,所以无法直接在urlopen里面加timeout参数,只能是设置全局脚本的超时时间

首先:

import socket

然后:

socket.setdefaulttimeout(60)

设置全局的超时时间为60s。

之后再执行脚本的时候就没有什么大问题了。

Python 相关文章推荐
Python封装shell命令实例分析
May 05 Python
python实现FTP服务器服务的方法
Apr 11 Python
Python三种遍历文件目录的方法实例代码
Jan 19 Python
DataFrame中去除指定列为空的行方法
Apr 08 Python
关于python列表增加元素的三种操作方法
Aug 22 Python
python微信好友数据分析详解
Nov 19 Python
关于Python作用域自学总结
Jun 10 Python
详解DeBug Python神级工具PySnooper
Jul 03 Python
Python可变参数会自动填充前面的默认同名参数实例
Nov 18 Python
python中wx模块的具体使用方法
May 15 Python
python文件路径操作方法总结
Dec 21 Python
Python接口自动化系列之unittest结合ddt的使用教程详解
Feb 23 Python
Python set集合类型操作总结
Nov 07 #Python
数据挖掘之Apriori算法详解和Python实现代码分享
Nov 07 #Python
Python的subprocess模块总结
Nov 07 #Python
Python实现的监测服务器硬盘使用率脚本分享
Nov 07 #Python
Python实现的简单发送邮件脚本分享
Nov 07 #Python
Python获取Linux系统下的本机IP地址代码分享
Nov 07 #Python
零基础写python爬虫之使用Scrapy框架编写爬虫
Nov 07 #Python
You might like
PHP base64+gzinflate压缩编码和解码代码
2008/10/03 PHP
推荐一款PHP+jQuery制作的列表分页的功能模块
2014/10/14 PHP
PHP数组对象与Json转换操作实例分析
2019/10/22 PHP
PHP数组Key强制类型转换实现原理解析
2020/09/01 PHP
jquery中dom操作和事件的实例学习-表单验证
2011/11/30 Javascript
jQuery实现鼠标划过修改样式的方法
2015/04/14 Javascript
setTimeout内不支持jquery的选择器的解决方案
2015/04/28 Javascript
今天抽时间给大家整理jquery和ajax的相关知识
2015/11/17 Javascript
javascript性能优化之事件委托实例详解
2015/12/12 Javascript
JavaScript+html5 canvas绘制渐变区域完整实例
2016/01/26 Javascript
微信JSAPI支付操作需要注意的细节
2017/01/10 Javascript
jQuery学习之DOM节点的插入方法总结
2017/01/22 Javascript
js图片延迟加载(Lazyload)三种实现方式
2017/03/01 Javascript
分享十三个最佳JavaScript数据网格库
2017/04/07 Javascript
vue的Virtual Dom实现snabbdom解密
2017/05/03 Javascript
详解使用vuex进行菜单管理
2017/12/21 Javascript
JS实现HTML页面中动态显示当前时间完整示例
2018/07/30 Javascript
jquery 键盘事件 keypress() keydown() keyup()用法总结
2019/10/23 jQuery
webpack4从0搭建组件库的实现
2020/11/29 Javascript
[47:55]Ti4第二日主赛事败者组 NaVi vs EG 1
2014/07/20 DOTA
[01:21]辉夜杯战队访谈宣传片—CDEC
2015/12/25 DOTA
在Python中使用sort()方法进行排序的简单教程
2015/05/21 Python
Python3一行代码实现图片文字识别的示例
2018/01/15 Python
python pandas cumsum求累计次数的用法
2019/07/29 Python
调试Django时打印SQL语句的日志代码实例
2019/09/12 Python
Python 3.6打包成EXE可执行程序的实现
2019/10/18 Python
PyCharm使用Docker镜像搭建Python开发环境
2019/12/26 Python
python实现简单飞行棋
2020/02/06 Python
Python判断字符串是否为空和null方法实例
2020/04/26 Python
Python爬取阿拉丁统计信息过程图解
2020/05/12 Python
django项目中使用云片网发送短信验证码的实现
2021/01/19 Python
CSS3属性使网站设计增强同时不消弱可用性
2009/08/29 HTML / CSS
纯HTML5+CSS3制作生日蛋糕代码
2016/11/16 HTML / CSS
简历中自我评价分享
2013/10/09 职场文书
材料会计岗位职责
2014/03/06 职场文书
利用Python实现翻译HTML中的文本字符串
2022/06/21 Python