Python使用urllib模块的urlopen超时问题解决方法


Posted in Python onNovember 08, 2014

在新的公司开始上班,今天工作的主题内容是市场部门需要抓取一些论坛用户的邮箱,以便发送营销邮件。

于是用了一个python脚本来执行,前面抓了几个都没有什么问题,后来碰到一个论坛,在执行urlopen的地方总是提示超时,百度了一下,因为我使用的是urllib不是urllib2,所以无法直接在urlopen里面加timeout参数,只能是设置全局脚本的超时时间

首先:

import socket

然后:

socket.setdefaulttimeout(60)

设置全局的超时时间为60s。

之后再执行脚本的时候就没有什么大问题了。

Python 相关文章推荐
Python高效编程技巧
Jan 07 Python
Python3.x对JSON的一些操作示例
Sep 01 Python
Python多重继承的方法解析执行顺序实例分析
May 26 Python
python爬虫正则表达式之处理换行符
Jun 08 Python
Python 字符串与数字输出方法
Jul 16 Python
在python中获取div的文本内容并和想定结果进行对比详解
Jan 02 Python
Python函数中不定长参数的写法
Feb 13 Python
python-itchat 获取微信群用户信息的实例
Feb 21 Python
NumPy 数组使用大全
Apr 25 Python
python创建子类的方法分析
Nov 28 Python
开启Django博客的RSS功能的实现方法
Feb 17 Python
利用python绘制正态分布曲线
Jan 04 Python
Python set集合类型操作总结
Nov 07 #Python
数据挖掘之Apriori算法详解和Python实现代码分享
Nov 07 #Python
Python的subprocess模块总结
Nov 07 #Python
Python实现的监测服务器硬盘使用率脚本分享
Nov 07 #Python
Python实现的简单发送邮件脚本分享
Nov 07 #Python
Python获取Linux系统下的本机IP地址代码分享
Nov 07 #Python
零基础写python爬虫之使用Scrapy框架编写爬虫
Nov 07 #Python
You might like
Symfony学习十分钟入门经典教程
2016/02/03 PHP
php实现计算百度地图坐标之间距离的方法
2016/05/05 PHP
PHP针对中英文混合字符串长度判断及截取方法示例
2017/03/31 PHP
Windows Live的@live.com域名注册漏洞 利用代码
2006/12/27 Javascript
JQUERY复选框CHECKBOX全选,取消全选
2008/08/30 Javascript
JS实现QQ图片一闪一闪的效果小例子
2013/07/31 Javascript
基于jquery的禁用右键、文本选择功能、复制按键的实现代码
2013/08/27 Javascript
基于jQuery的JavaScript模版引擎JsRender使用指南
2014/12/29 Javascript
详解Node.js包的工程目录与NPM包管理器的使用
2016/02/16 Javascript
JS组件系列之Bootstrap table表格组件神器【终结篇】
2016/05/10 Javascript
javascript实现获取图片大小及图片等比缩放的方法
2016/11/24 Javascript
jquery购物车结算功能实现方法
2020/10/29 Javascript
Vue.js实现多条件筛选、搜索、排序及分页的表格功能
2020/11/24 Javascript
详解从Vue.js源码看异步更新DOM策略及nextTick
2017/10/11 Javascript
微信上传视频文件提示(推荐)
2018/11/22 Javascript
JS选取DOM元素常见操作方法实例分析
2018/12/10 Javascript
微信小程序实现随机验证码功能
2018/12/20 Javascript
基于vue实现滚动条滚动到指定位置对应位置数字进行tween特效
2019/04/18 Javascript
vue实现搜索功能
2019/05/28 Javascript
Node.js之删除文件夹(含递归删除)代码实例
2019/09/09 Javascript
python的即时标记项目练习笔记
2014/09/18 Python
python的pdb调试命令的命令整理及实例
2017/07/12 Python
Python学习pygal绘制线图代码分享
2017/12/09 Python
Python实现PS滤镜的万花筒效果示例
2018/01/23 Python
pycharm重置设置,恢复默认设置的方法
2018/10/22 Python
python动态进度条的实现代码
2019/07/03 Python
Keras框架中的epoch、bacth、batch size、iteration使用介绍
2020/06/10 Python
python 窃取摄像头照片的实现示例
2021/01/08 Python
一款纯css3制作的2015年元旦雪人动画特效教程
2014/12/29 HTML / CSS
建龙钢铁面试总结
2014/04/15 面试题
单位提档介绍信
2014/01/17 职场文书
党的群众路线教育实践活动组织生活会发言材料
2014/10/17 职场文书
总经理岗位职责
2015/02/04 职场文书
合理化建议书范文
2015/09/14 职场文书
Nginx本地目录映射实现代码实例
2021/03/31 Servers
Python调用腾讯API实现人脸身份证比对功能
2022/04/04 Python