Python使用urllib模块的urlopen超时问题解决方法


Posted in Python onNovember 08, 2014

在新的公司开始上班,今天工作的主题内容是市场部门需要抓取一些论坛用户的邮箱,以便发送营销邮件。

于是用了一个python脚本来执行,前面抓了几个都没有什么问题,后来碰到一个论坛,在执行urlopen的地方总是提示超时,百度了一下,因为我使用的是urllib不是urllib2,所以无法直接在urlopen里面加timeout参数,只能是设置全局脚本的超时时间

首先:

import socket

然后:

socket.setdefaulttimeout(60)

设置全局的超时时间为60s。

之后再执行脚本的时候就没有什么大问题了。

Python 相关文章推荐
Python之eval()函数危险性浅析
Jul 03 Python
Python基于PycURL实现POST的方法
Jul 25 Python
Python使用Turtle模块绘制五星红旗代码示例
Dec 11 Python
wxPython实现窗口用图片做背景
Apr 25 Python
将python文件打包成EXE应用程序的方法
May 22 Python
Python监控服务器实用工具psutil使用解析
Dec 19 Python
Python利用Scrapy框架爬取豆瓣电影示例
Jan 17 Python
tensorflow自定义激活函数实例
Feb 04 Python
python+selenium定时爬取丁香园的新型冠状病毒数据并制作出类似的地图(部署到云服务器)
Feb 09 Python
Python使用sqlite3模块内置数据库
May 07 Python
在tensorflow下利用plt画论文中loss,acc等曲线图实例
Jun 15 Python
python爬虫框架feapde的使用简介
Apr 20 Python
Python set集合类型操作总结
Nov 07 #Python
数据挖掘之Apriori算法详解和Python实现代码分享
Nov 07 #Python
Python的subprocess模块总结
Nov 07 #Python
Python实现的监测服务器硬盘使用率脚本分享
Nov 07 #Python
Python实现的简单发送邮件脚本分享
Nov 07 #Python
Python获取Linux系统下的本机IP地址代码分享
Nov 07 #Python
零基础写python爬虫之使用Scrapy框架编写爬虫
Nov 07 #Python
You might like
合作指挥官:孟斯克
2020/03/16 星际争霸
php仿ZOL分页类代码
2008/10/02 PHP
PHP 读取和编写 XML
2014/11/19 PHP
使用JavaScript创建新样式表和新样式规则
2016/06/14 PHP
JavaScript类库D
2010/10/24 Javascript
JavaScript对象和字串之间的转换实例探讨
2013/04/21 Javascript
基于JQuery的列表拖动排序实现代码
2013/10/01 Javascript
js获取时间(本周、本季度、本月..)
2013/11/22 Javascript
Js实现网页键盘控制翻页的方法
2014/10/30 Javascript
浅析Node.js中使用依赖注入的相关问题及解决方法
2015/06/24 Javascript
详解javascript中的事件处理
2015/11/06 Javascript
微信小程序 Record API详解及实例代码
2016/09/30 Javascript
JS实现动态增加和删除li标签行的实例代码
2016/10/16 Javascript
JS完成画圆圈的小球
2017/03/07 Javascript
深入理解Node.js中的进程管理
2017/03/13 Javascript
详解用Node.js实现Restful风格webservice
2017/09/29 Javascript
微信小程序实现传参数的几种方法示例
2018/01/10 Javascript
浅析微信扫码登录原理(小结)
2018/10/29 Javascript
JavaScript基于遍历操作实现对象深拷贝功能示例
2019/03/05 Javascript
vue中使用echarts的示例
2021/01/03 Vue.js
Python实现端口复用实例代码
2014/07/03 Python
python中的错误处理
2016/04/10 Python
对Python的Django框架中的项目进行单元测试的方法
2016/04/11 Python
python中pandas.DataFrame排除特定行方法示例
2017/03/12 Python
解决python3 网络请求路径包含中文的问题
2018/05/10 Python
numpy.linspace函数具体使用详解
2019/05/27 Python
python opencv实现图片缺陷检测(讲解直方图以及相关系数对比法)
2020/04/07 Python
eBay爱尔兰站:eBay.ie
2019/08/09 全球购物
致全体运动员广播稿
2014/02/01 职场文书
机修工工作职责
2014/02/21 职场文书
爱与责任演讲稿
2014/05/20 职场文书
软件售后服务方案
2014/05/29 职场文书
国企干部对照检查材料
2014/08/22 职场文书
税务职业生涯规划书范文
2014/09/16 职场文书
综治目标管理责任书
2015/05/11 职场文书
动画电影《龙珠超 超级英雄》延期上映
2022/03/20 日漫