python使用BeautifulSoup分页网页中超链接的方法


Posted in Python onApril 04, 2015

本文实例讲述了python使用BeautifulSoup分页网页中超链接的方法。分享给大家供大家参考。具体如下:

python通过BeautifulSoup分页网页中的超级链接,这段python代码输出3water.com主页上所有包含了3water的url链接

from BeautifulSoup import BeautifulSoup
import urllib2
import re
url = urllib2.urlopen("https://3water.com")
content = url.read()
soup = BeautifulSoup(content)
for a in soup.findAll('a',href=True):
  if re.findall('sharejs', a['href']):
    print "Found the URL:", a['href']

希望本文所述对大家的Python程序设计有所帮助。

Python 相关文章推荐
用Python计算三角函数之atan()方法的使用
May 15 Python
Python计算一个文件里字数的方法
Jun 15 Python
python中日志logging模块的性能及多进程详解
Jul 18 Python
python+ffmpeg视频并发直播压力测试
Mar 06 Python
pandas.dataframe中根据条件获取元素所在的位置方法(索引)
Jun 07 Python
基于python框架Scrapy爬取自己的博客内容过程详解
Aug 05 Python
django多文件上传,form提交,多对多外键保存的实例
Aug 06 Python
Python通过4种方式实现进程数据通信
Mar 12 Python
在spyder IPython console中,运行代码加入参数的实例
Apr 20 Python
Python基于tkinter canvas实现图片裁剪功能
Nov 05 Python
Python实现区域填充的示例代码
Feb 03 Python
Python Flask搭建yolov3目标检测系统详解流程
Nov 07 Python
python实现分析apache和nginx日志文件并输出访客ip列表的方法
Apr 04 #Python
python使用BeautifulSoup分析网页信息的方法
Apr 04 #Python
python使用webbrowser浏览指定url的方法
Apr 04 #Python
用Python编写一个简单的俄罗斯方块游戏的教程
Apr 03 #Python
用Python代码来绘制彭罗斯点阵的教程
Apr 03 #Python
利用Python演示数型数据结构的教程
Apr 03 #Python
简洁的十分钟Python入门教程
Apr 03 #Python
You might like
php初学者写及时补给skype用户充话费的小程序
2008/11/02 PHP
深入理解PHP中的empty和isset函数
2016/05/26 PHP
PHP实现的网站目录扫描索引工具
2016/09/08 PHP
PHP用PDO如何封装简单易用的DB类详解
2017/07/30 PHP
laravel 输出最后执行sql 附:whereIn的使用方法
2019/10/10 PHP
html文本框提示效果的示例代码
2014/06/28 Javascript
JavaScript中的toLocaleLowerCase()方法使用详解
2015/06/06 Javascript
js实现适用于素材网站的黑色多级菜单导航条效果
2015/08/24 Javascript
如何消除inline-block属性带来的标签间间隙
2016/03/31 Javascript
js调用父框架函数与弹窗调用父页面函数的简单方法
2016/11/01 Javascript
BootStrap Table 设置height表头与内容无法对齐的问题
2016/12/28 Javascript
JavaScript高阶函数_动力节点Java学院整理
2017/06/28 Javascript
js实现1,2,3,5数字按照概率生成
2017/09/12 Javascript
npm 更改默认全局路径以及国内镜像的方法
2018/05/16 Javascript
js+html5 canvas实现ps钢笔抠图
2019/04/28 Javascript
深入浅出了解Node.js Streams
2019/05/27 Javascript
[04:28]2014DOTA2国际邀请赛 采访小兔子LGD挺进钥匙体育馆
2014/07/14 DOTA
[03:27]最受玩家喜爱奖提名:PZH_Element 致玩家寄语
2016/12/20 DOTA
使用Python下载歌词并嵌入歌曲文件中的实现代码
2015/11/13 Python
python跳过第一行快速读取文件内容的实例
2018/07/12 Python
Tensorflow 实现修改张量特定元素的值方法
2018/07/30 Python
python将txt文档每行内容循环插入数据库的方法
2018/12/28 Python
设置jupyter中DataFrame的显示限制方式
2020/04/12 Python
css3进行截取替代js的substring
2013/09/02 HTML / CSS
使用简单的CSS3属性实现炫酷读者墙效果
2014/01/08 HTML / CSS
介绍Ibatis的核心类
2013/11/18 面试题
统计员岗位职责
2013/11/14 职场文书
任课老师推荐信范文
2013/11/24 职场文书
大学生咖啡店创业计划书
2014/01/21 职场文书
公司捐款倡议书
2014/05/14 职场文书
德育标兵事迹材料
2014/08/24 职场文书
普通党员对照检查材料
2014/09/24 职场文书
绍兴鲁迅故居导游词
2015/02/09 职场文书
2015年员工工作总结范文
2015/04/08 职场文书
答谢酒会主持词
2015/07/02 职场文书
运动会三级跳加油稿
2015/07/21 职场文书