python使用BeautifulSoup分页网页中超链接的方法


Posted in Python onApril 04, 2015

本文实例讲述了python使用BeautifulSoup分页网页中超链接的方法。分享给大家供大家参考。具体如下:

python通过BeautifulSoup分页网页中的超级链接,这段python代码输出3water.com主页上所有包含了3water的url链接

from BeautifulSoup import BeautifulSoup
import urllib2
import re
url = urllib2.urlopen("https://3water.com")
content = url.read()
soup = BeautifulSoup(content)
for a in soup.findAll('a',href=True):
  if re.findall('sharejs', a['href']):
    print "Found the URL:", a['href']

希望本文所述对大家的Python程序设计有所帮助。

Python 相关文章推荐
基于python实现的抓取腾讯视频所有电影的爬虫
Apr 22 Python
python常见排序算法基础教程
Apr 13 Python
python实现逻辑回归的方法示例
May 02 Python
Python实现针对含中文字符串的截取功能示例
Sep 22 Python
python如何通过twisted实现数据库异步插入
Mar 20 Python
对python中大文件的导入与导出方法详解
Dec 28 Python
python 引用传递和值传递详解(实参,形参)
Jun 05 Python
Python使用20行代码实现微信聊天机器人
Jun 05 Python
使用Keras构造简单的CNN网络实例
Jun 29 Python
python3 简单实现组合设计模式
Jul 02 Python
python递归函数用法详解
Oct 26 Python
详解vscode实现远程linux服务器上Python开发
Nov 10 Python
python实现分析apache和nginx日志文件并输出访客ip列表的方法
Apr 04 #Python
python使用BeautifulSoup分析网页信息的方法
Apr 04 #Python
python使用webbrowser浏览指定url的方法
Apr 04 #Python
用Python编写一个简单的俄罗斯方块游戏的教程
Apr 03 #Python
用Python代码来绘制彭罗斯点阵的教程
Apr 03 #Python
利用Python演示数型数据结构的教程
Apr 03 #Python
简洁的十分钟Python入门教程
Apr 03 #Python
You might like
无线电广播的开始
2002/01/30 无线电
Discuz Uchome ajaxpost小技巧
2011/01/04 PHP
浅谈php的TS和NTS的区别
2019/03/13 PHP
jquery入门必备的基本认识及实例(整理)
2013/06/24 Javascript
jQuery不兼容input的change事件问题解决过程
2014/12/05 Javascript
javascript实现链接单选效果的方法
2015/05/13 Javascript
JavaScript鼠标事件,点击鼠标右键,弹出div的简单实例
2016/08/03 Javascript
JavaScript中push(),join() 函数 实例详解
2016/09/06 Javascript
JavaScript利用正则表达式替换字符串中的内容
2016/12/12 Javascript
JS封装通过className获取元素的函数示例
2016/12/20 Javascript
微信小程序开发之从相册获取图片 使用相机拍照 本地图片上传
2017/04/18 Javascript
JavaScript简介_动力节点Java学院整理
2017/06/26 Javascript
vue的列表交错过渡实现代码示例
2019/05/05 Javascript
nodejs读取图片返回给浏览器显示
2019/07/25 NodeJs
vuex 实现getter值赋值给vue组件里的data示例
2019/11/05 Javascript
vue视频播放暂停代码
2019/11/08 Javascript
vue实现自定义多选按钮
2020/07/16 Javascript
Python爬虫爬取美剧网站的实现代码
2016/09/03 Python
Python 实现子类获取父类的类成员方法
2019/01/11 Python
Python Flask 搭建微信小程序后台详解
2019/05/06 Python
python实现图片压缩代码实例
2019/08/12 Python
使用pytorch完成kaggle猫狗图像识别方式
2020/01/10 Python
Python while true实现爬虫定时任务
2020/06/08 Python
python基于opencv 实现图像时钟
2021/01/04 Python
美国最大的船只买卖在线市场:Boat Trader
2018/08/04 全球购物
英国领先的维生素和营养补充剂直接供应商:Healthspan
2019/04/22 全球购物
接口可以包含哪些成员
2012/09/30 面试题
电子商务专业个人的自我评价
2013/11/19 职场文书
费用会计岗位职责
2014/01/01 职场文书
日语专业求职信
2014/07/04 职场文书
党的生日活动方案
2014/08/15 职场文书
七年级地理教学计划
2015/01/22 职场文书
琅琊山导游词
2015/02/05 职场文书
师德承诺书2015
2015/04/28 职场文书
2016大一新生军训感言
2015/12/08 职场文书
使用Redis实现点赞取消点赞的详细代码
2022/03/20 Redis