python使用BeautifulSoup分页网页中超链接的方法


Posted in Python onApril 04, 2015

本文实例讲述了python使用BeautifulSoup分页网页中超链接的方法。分享给大家供大家参考。具体如下:

python通过BeautifulSoup分页网页中的超级链接,这段python代码输出3water.com主页上所有包含了3water的url链接

from BeautifulSoup import BeautifulSoup
import urllib2
import re
url = urllib2.urlopen("https://3water.com")
content = url.read()
soup = BeautifulSoup(content)
for a in soup.findAll('a',href=True):
  if re.findall('sharejs', a['href']):
    print "Found the URL:", a['href']

希望本文所述对大家的Python程序设计有所帮助。

Python 相关文章推荐
全面了解Python的getattr(),setattr(),delattr(),hasattr()
Jun 14 Python
Python selenium 父子、兄弟、相邻节点定位方式详解
Sep 15 Python
python 自动化将markdown文件转成html文件的方法
Sep 23 Python
Python实现学生成绩管理系统
Apr 05 Python
Numpy array数据的增、删、改、查实例
Jun 04 Python
对python中的 os.mkdir和os.mkdirs详解
Oct 16 Python
浅谈django的render函数的参数问题
Oct 16 Python
浅谈python 读excel数值为浮点型的问题
Dec 25 Python
Django框架验证码用法实例分析
May 10 Python
python实现发送form-data数据的方法详解
Sep 27 Python
Python利用imshow制作自定义渐变填充柱状图(colorbar)
Dec 10 Python
matplotlib绘制正余弦曲线图的实现
Feb 22 Python
python实现分析apache和nginx日志文件并输出访客ip列表的方法
Apr 04 #Python
python使用BeautifulSoup分析网页信息的方法
Apr 04 #Python
python使用webbrowser浏览指定url的方法
Apr 04 #Python
用Python编写一个简单的俄罗斯方块游戏的教程
Apr 03 #Python
用Python代码来绘制彭罗斯点阵的教程
Apr 03 #Python
利用Python演示数型数据结构的教程
Apr 03 #Python
简洁的十分钟Python入门教程
Apr 03 #Python
You might like
php 遍历显示文件夹下所有目录、所有文件的函数,没有分页的代码
2008/11/14 PHP
php获取远程文件的内容和大小
2015/11/03 PHP
php判断用户是否关注微信公众号
2016/07/22 PHP
javascript 三种编解码方式
2010/02/01 Javascript
原生js的弹出层且其内的窗口居中
2014/05/14 Javascript
jquery实现简单的无缝滚动
2015/04/15 Javascript
举例详解AngularJS中ngShow和ngHide的使用方法
2015/06/19 Javascript
jquery实现的简单二级菜单效果代码
2015/09/22 Javascript
JavaScript判断表单为空及获取焦点的方法
2016/02/12 Javascript
js小数计算小数点后显示多位小数的实现方法
2016/05/30 Javascript
jQuery悬停文字提示框插件jquery.tooltipster.js用法示例【附demo源码下载】
2016/07/19 Javascript
jQuery+CSS3实现四种应用广泛的导航条制作实例详解
2016/09/17 Javascript
使用json来定义函数,在里面可以定义多个函数的实现方法
2016/10/28 Javascript
100多个基础常用JS函数和语法集合大全
2017/02/16 Javascript
Nodejs中使用phantom将html转为pdf或图片格式的方法
2017/09/18 NodeJs
Vue 获取数组键名的方法
2018/06/21 Javascript
Vue ElementUI实现:限制输入框只能输入正整数的问题
2020/07/31 Javascript
[28:42]Ti4正赛VG vs NEWBEE1
2014/07/19 DOTA
[01:00:25]NB vs Secret 2018国际邀请赛小组赛BO1 B组加赛 8.19
2018/08/21 DOTA
Python中logging模块的用法实例
2014/09/29 Python
深入解析Python设计模式编程中建造者模式的使用
2016/03/02 Python
Python装饰器基础详解
2016/03/09 Python
Python求出0~100以内的所有素数
2018/01/23 Python
Python3.4学习笔记之常用操作符,条件分支和循环用法示例
2019/03/01 Python
详解用python生成随机数的几种方法
2019/08/04 Python
基于Django OneToOneField和ForeignKey的区别详解
2020/03/30 Python
CSS3 background-image颜色渐变的实现代码
2018/09/13 HTML / CSS
CSS3动画:5种预载动画效果实例
2017/04/05 HTML / CSS
加拿大便宜的隐形眼镜商店:Clearly
2016/09/15 全球购物
人力管理专业毕业生求职信
2014/02/27 职场文书
六五普法规划实施方案
2014/03/21 职场文书
英语一分钟演讲稿
2014/04/29 职场文书
党员检讨书
2014/10/13 职场文书
《一面五星红旗》教学反思
2016/02/23 职场文书
爱国之歌(8首)
2019/09/29 职场文书
七年级作文之游记
2019/12/11 职场文书