Python使用urllib模块的urlopen超时问题解决方法


Posted in Python onNovember 08, 2014

在新的公司开始上班,今天工作的主题内容是市场部门需要抓取一些论坛用户的邮箱,以便发送营销邮件。

于是用了一个python脚本来执行,前面抓了几个都没有什么问题,后来碰到一个论坛,在执行urlopen的地方总是提示超时,百度了一下,因为我使用的是urllib不是urllib2,所以无法直接在urlopen里面加timeout参数,只能是设置全局脚本的超时时间

首先:

import socket

然后:

socket.setdefaulttimeout(60)

设置全局的超时时间为60s。

之后再执行脚本的时候就没有什么大问题了。

Python 相关文章推荐
Python递归函数定义与用法示例
Jun 02 Python
Python编程实现控制cmd命令行显示颜色的方法示例
Aug 14 Python
[原创]pip和pygal的安装实例教程
Dec 07 Python
Django添加sitemap的方法示例
Aug 06 Python
python代理工具mitmproxy使用指南
Jul 04 Python
Pandas中DataFrame的分组/分割/合并的实现
Jul 16 Python
python实现飞机大战小游戏
Nov 08 Python
使用python的turtle绘画滑稽脸实例
Nov 21 Python
Pycharm最新激活码2019(推荐)
Dec 31 Python
TensorFlow 读取CSV数据的实例
Feb 05 Python
python中文分词库jieba使用方法详解
Feb 11 Python
Python批量修改xml的坐标值全部转为整数的实例代码
Nov 26 Python
Python set集合类型操作总结
Nov 07 #Python
数据挖掘之Apriori算法详解和Python实现代码分享
Nov 07 #Python
Python的subprocess模块总结
Nov 07 #Python
Python实现的监测服务器硬盘使用率脚本分享
Nov 07 #Python
Python实现的简单发送邮件脚本分享
Nov 07 #Python
Python获取Linux系统下的本机IP地址代码分享
Nov 07 #Python
零基础写python爬虫之使用Scrapy框架编写爬虫
Nov 07 #Python
You might like
php中文本数据翻页(留言本翻页)
2006/10/09 PHP
php基于jquery的ajax技术传递json数据简单实例
2016/04/15 PHP
php插件Xajax使用方法详解
2017/08/31 PHP
发布BlueShow v1.0 图片浏览器(类似lightbox)blueshow.js 打包下载
2007/07/21 Javascript
Extjs列表详细信息窗口新建后自动加载解决方法
2010/04/02 Javascript
javascript多种数据类型表格排序代码分析
2010/09/11 Javascript
js 利用image对象实现图片的预加载提高访问速度
2013/03/29 Javascript
JS使用replace()方法和正则表达式进行字符串的搜索与替换实例
2014/04/10 Javascript
JQuery以JSON方式提交数据到服务端示例代码
2014/05/05 Javascript
jquery实现保存已选用户
2014/07/21 Javascript
JavaScript实现重置表单(reset)的方法
2015/04/02 Javascript
Javascript中实现String.startsWith和endsWith方法
2015/06/10 Javascript
jQuery打字效果实现方法(附demo源码下载)
2015/12/18 Javascript
浅谈MVC+EF easyui dataGrid 动态加载分页表格
2016/11/10 Javascript
Vue服务端渲染和Vue浏览器端渲染的性能对比(实例PK )
2017/03/31 Javascript
vue 实现 tomato timer(蕃茄钟)实例讲解
2017/07/24 Javascript
vue移动端实现下拉刷新
2018/04/22 Javascript
在HTML文档中嵌入JavaScript的四种方法
2018/05/07 Javascript
VUE 实现复制内容到剪贴板的两种方法
2019/04/24 Javascript
JS工厂模式开发实践案例分析
2019/10/17 Javascript
VUE实时监听元素距离顶部高度的操作
2020/07/29 Javascript
[38:31]完美世界DOTA2联赛PWL S3 Magma vs GXR 第一场 12.13
2020/12/17 DOTA
[01:33:25]DOTA2-DPC中国联赛 正赛 Elephant vs IG BO3 第一场 1月24日
2021/03/11 DOTA
在Python中操作列表之List.append()方法的使用
2015/05/20 Python
python导出hive数据表的schema实例代码
2018/01/22 Python
使用python opencv对目录下图片进行去重的方法
2019/01/12 Python
Python 分发包中添加额外文件的方法
2019/08/16 Python
小结Python的反射机制
2020/09/28 Python
python实现跨年表白神器--你值得拥有
2021/01/04 Python
CSS3 border-radius圆角的实现方法及用法详解
2020/09/14 HTML / CSS
2013英文求职信模板范文
2013/11/15 职场文书
小学教师2014年度工作总结
2014/12/03 职场文书
nginx反向代理配置去除前缀案例教程
2021/07/26 Servers
Python中的turtle画箭头,矩形,五角星
2022/03/16 Python
MySQL数据库优化之通过索引解决SQL性能问题
2022/04/10 MySQL
Golang Elasticsearches 批量修改查询及发送MQ
2022/04/19 Golang