python使用BeautifulSoup分页网页中超链接的方法


Posted in Python onApril 04, 2015

本文实例讲述了python使用BeautifulSoup分页网页中超链接的方法。分享给大家供大家参考。具体如下:

python通过BeautifulSoup分页网页中的超级链接,这段python代码输出3water.com主页上所有包含了3water的url链接

from BeautifulSoup import BeautifulSoup
import urllib2
import re
url = urllib2.urlopen("https://3water.com")
content = url.read()
soup = BeautifulSoup(content)
for a in soup.findAll('a',href=True):
  if re.findall('sharejs', a['href']):
    print "Found the URL:", a['href']

希望本文所述对大家的Python程序设计有所帮助。

Python 相关文章推荐
Python中input和raw_input的一点区别
Oct 21 Python
python 遍历字符串(含汉字)实例详解
Apr 04 Python
简单了解什么是神经网络
Dec 23 Python
Python数据分析之获取双色球历史信息的方法示例
Feb 03 Python
python3 pandas 读取MySQL数据和插入的实例
Apr 20 Python
Python使用pip安装pySerial串口通讯模块
Apr 20 Python
对Python字符串中的换行符和制表符介绍
May 03 Python
python导入pandas具体步骤方法
Jun 23 Python
Python Django 简单分页的实现代码解析
Aug 21 Python
numpy 返回函数的上三角矩阵实例
Nov 25 Python
细数nn.BCELoss与nn.CrossEntropyLoss的区别
Feb 29 Python
Django DRF路由与扩展功能的实现
Jun 03 Python
python实现分析apache和nginx日志文件并输出访客ip列表的方法
Apr 04 #Python
python使用BeautifulSoup分析网页信息的方法
Apr 04 #Python
python使用webbrowser浏览指定url的方法
Apr 04 #Python
用Python编写一个简单的俄罗斯方块游戏的教程
Apr 03 #Python
用Python代码来绘制彭罗斯点阵的教程
Apr 03 #Python
利用Python演示数型数据结构的教程
Apr 03 #Python
简洁的十分钟Python入门教程
Apr 03 #Python
You might like
php的无刷新操作实现方法分析
2020/02/28 PHP
阻止JavaScript事件冒泡传递(cancelBubble 、stopPropagation)
2007/05/08 Javascript
JavaScript 动态创建VML的方法
2009/10/14 Javascript
得到jQuery detach()后节点中的某个值实现代码
2013/02/05 Javascript
超简单JS二级、多级联动的简单实例
2014/02/18 Javascript
简介EasyUI datagrid editor combogrid搜索框的实现
2016/04/01 Javascript
artDialog+plupload实现多文件上传
2016/07/19 Javascript
AngularJs ng-repeat 嵌套如何获取外层$index
2016/09/21 Javascript
用jquery快速解决IE输入框不能输入的问题
2016/10/04 Javascript
js数组操作方法总结(必看篇)
2016/11/22 Javascript
vue2 如何实现div contenteditable=“true”(类似于v-model)的效果
2017/02/08 Javascript
微信小程序联网请求的轮播图
2017/07/07 Javascript
vue-cli中打包图片路径错误的解决方法
2017/10/26 Javascript
jQuery niceScroll滚动条错位问题的解决方法
2018/02/03 jQuery
Vue在页面数据渲染完成之后的调用方法
2018/09/11 Javascript
小程序实现左滑删除效果
2019/07/25 Javascript
原生JS实现天气预报
2020/06/16 Javascript
vue 点击其他区域关闭自定义div操作
2020/07/17 Javascript
JS轮播图的实现方法
2020/08/24 Javascript
通过实例解析js可枚举属性与不可枚举属性
2020/12/02 Javascript
Python装饰器实现几类验证功能做法实例
2017/05/18 Python
python实现烟花小程序
2019/01/30 Python
在linux系统下安装python librtmp包的实现方法
2019/07/22 Python
在OpenCV里使用特征匹配和单映射变换的代码详解
2019/10/23 Python
Python网络编程之使用TCP方式传输文件操作示例
2019/11/01 Python
CSS3实现大小不一的粒子旋转加载动画
2016/04/21 HTML / CSS
CSS3中的弹性布局em运用入门详解 1em等于多少像素
2021/02/08 HTML / CSS
Canvas制作旋转的太极的示例
2018/03/09 HTML / CSS
HTML5 客户端数据库简易使用:IndexedDB
2019/12/19 HTML / CSS
唤醒头发毛囊的秘密武器:Grow Gorgeous
2016/08/28 全球购物
Dodax奥地利:音乐、电影、书籍、玩具、电子产品等
2019/08/31 全球购物
VisionPros美国站:加拿大在线隐形眼镜和眼镜零售商
2020/02/11 全球购物
教导处工作制度
2014/01/18 职场文书
行政专员岗位职责范本
2014/08/26 职场文书
纪念九一八事变演讲稿1000字
2014/09/14 职场文书
工作失误检讨书(经典集锦版)
2014/10/17 职场文书