Python使用urllib模块的urlopen超时问题解决方法


Posted in Python onNovember 08, 2014

在新的公司开始上班,今天工作的主题内容是市场部门需要抓取一些论坛用户的邮箱,以便发送营销邮件。

于是用了一个python脚本来执行,前面抓了几个都没有什么问题,后来碰到一个论坛,在执行urlopen的地方总是提示超时,百度了一下,因为我使用的是urllib不是urllib2,所以无法直接在urlopen里面加timeout参数,只能是设置全局脚本的超时时间

首先:

import socket

然后:

socket.setdefaulttimeout(60)

设置全局的超时时间为60s。

之后再执行脚本的时候就没有什么大问题了。

Python 相关文章推荐
python Flask 装饰器顺序问题解决
Aug 08 Python
python3实现名片管理系统
Nov 29 Python
使用python批量化音乐文件格式转换的实例
Jan 09 Python
scrapy-redis源码分析之发送POST请求详解
May 15 Python
python3获取url文件大小示例代码
Sep 18 Python
redis数据库及与python交互用法简单示例
Nov 01 Python
Python通过TensorFLow进行线性模型训练原理与实现方法详解
Jan 15 Python
浅谈keras.callbacks设置模型保存策略
Jun 18 Python
python利用os模块编写文件复制功能——copy()函数用法
Jul 13 Python
改变 Python 中线程执行顺序的方法
Sep 24 Python
使用django自带的user做外键的方法
Nov 30 Python
Python实现简单猜数字游戏
Feb 03 Python
Python set集合类型操作总结
Nov 07 #Python
数据挖掘之Apriori算法详解和Python实现代码分享
Nov 07 #Python
Python的subprocess模块总结
Nov 07 #Python
Python实现的监测服务器硬盘使用率脚本分享
Nov 07 #Python
Python实现的简单发送邮件脚本分享
Nov 07 #Python
Python获取Linux系统下的本机IP地址代码分享
Nov 07 #Python
零基础写python爬虫之使用Scrapy框架编写爬虫
Nov 07 #Python
You might like
自动生成文章摘要的代码[PHP 版本]
2007/03/20 PHP
在Win7 中为php扩展配置Xcache
2014/10/08 PHP
使用PHPExcel操作Excel用法实例分析
2015/03/26 PHP
PHP中strncmp()函数比较两个字符串前2个字符是否相等的方法
2016/01/07 PHP
用jscript实现新建word文档
2007/06/15 Javascript
jquery获取input的value问题说明
2010/08/19 Javascript
jquery异步跨域访问代码
2013/06/28 Javascript
简介JavaScript中toTimeString()方法的使用
2015/06/12 Javascript
AngularJS bootstrap启动详解及实例代码
2016/09/14 Javascript
使用requirejs模块化开发多页面一个入口js的使用方式
2017/06/14 Javascript
js中url对象化管理分析
2017/12/29 Javascript
JS实现简易换图时钟功能分析
2018/01/04 Javascript
解决vue脚手架项目打包后路由视图不显示的问题
2018/09/20 Javascript
解决vue keep-alive 数据更新的问题
2018/09/21 Javascript
Vue 2.0 中依赖注入 provide/inject组合实战
2019/06/20 Javascript
[01:26]DOTA2荣耀之路2:iG,China
2018/05/24 DOTA
[01:24:16]2018DOTA2亚洲邀请赛 4.6 全明星赛
2018/04/10 DOTA
python解析json实例方法
2013/11/19 Python
Python实例分享:快速查找出被挂马的文件
2014/06/08 Python
Python文件与文件夹常见基本操作总结
2016/09/19 Python
详解利用django中间件django.middleware.csrf.CsrfViewMiddleware防止csrf攻击
2018/10/09 Python
python3 图片 4通道转成3通道 1通道转成3通道 图片压缩实例
2019/12/03 Python
tf.concat中axis的含义与使用详解
2020/02/07 Python
详解python算法常用技巧与内置库
2020/10/17 Python
详解用selenium来下载小姐姐图片并保存
2021/01/26 Python
CSS3 3D制作实战案例分析
2016/09/18 HTML / CSS
使用HTML5的Notification API制作web通知的教程
2015/05/08 HTML / CSS
美国最大的万圣节服装网站:HalloweenCostumes.com
2017/10/12 全球购物
办理退休介绍信
2014/01/09 职场文书
助人为乐道德模范事迹材料
2014/08/16 职场文书
高中运动会广播稿
2014/09/16 职场文书
党员对照检查材料思想汇报(党的群众路线)
2014/09/24 职场文书
运动会班级口号霸气押韵
2015/12/24 职场文书
导游词之寿县报恩寺
2020/01/19 职场文书
react中的DOM操作实现
2021/06/30 Javascript
一小时学会TensorFlow2之基本操作2实例代码
2021/09/04 Python