python使用BeautifulSoup分页网页中超链接的方法


Posted in Python onApril 04, 2015

本文实例讲述了python使用BeautifulSoup分页网页中超链接的方法。分享给大家供大家参考。具体如下:

python通过BeautifulSoup分页网页中的超级链接,这段python代码输出3water.com主页上所有包含了3water的url链接

from BeautifulSoup import BeautifulSoup
import urllib2
import re
url = urllib2.urlopen("https://3water.com")
content = url.read()
soup = BeautifulSoup(content)
for a in soup.findAll('a',href=True):
  if re.findall('sharejs', a['href']):
    print "Found the URL:", a['href']

希望本文所述对大家的Python程序设计有所帮助。

Python 相关文章推荐
python处理圆角图片、圆形图片的例子
Apr 25 Python
Python多线程编程(五):死锁的形成
Apr 05 Python
python 循环while和for in简单实例
Aug 16 Python
Python读取图片为16进制表示简单代码
Jan 19 Python
Python3.6实现连接mysql或mariadb的方法分析
May 18 Python
Django开发中的日志输出的方法
Jul 02 Python
Python时间序列处理之ARIMA模型的使用讲解
Apr 02 Python
Python实现 版本号对比功能的实例代码
Apr 18 Python
django框架事务处理小结【ORM 事务及raw sql,customize sql 事务处理】
Jun 27 Python
Python lambda表达式filter、map、reduce函数用法解析
Sep 11 Python
Python 可变类型和不可变类型及引用过程解析
Sep 27 Python
opencv python在视屏上截图功能的实现
Mar 05 Python
python实现分析apache和nginx日志文件并输出访客ip列表的方法
Apr 04 #Python
python使用BeautifulSoup分析网页信息的方法
Apr 04 #Python
python使用webbrowser浏览指定url的方法
Apr 04 #Python
用Python编写一个简单的俄罗斯方块游戏的教程
Apr 03 #Python
用Python代码来绘制彭罗斯点阵的教程
Apr 03 #Python
利用Python演示数型数据结构的教程
Apr 03 #Python
简洁的十分钟Python入门教程
Apr 03 #Python
You might like
php保存信息到当前Session的方法
2015/03/16 PHP
php array_map()函数实例用法
2021/03/03 PHP
TFDN图片播放器 不错自动播放
2006/10/03 Javascript
动态加载js的几种方法
2006/10/23 Javascript
Javascript 日期处理之时区问题
2009/10/08 Javascript
JavaScript CSS 修改学习第四章 透明度设置
2010/02/19 Javascript
简体中文转换繁体中文(实现代码)
2013/12/25 Javascript
js 针对html DOM元素操作等经验累积
2014/03/11 Javascript
深入理解javascript作用域第二篇之词法作用域和动态作用域
2016/07/24 Javascript
Javascript 6里的4个新语法
2016/08/25 Javascript
JS传参及动态修改页面布局
2017/04/13 Javascript
vue.js开发环境搭建教程
2017/05/04 Javascript
ReactJs实现树形结构的数据显示的组件的示例
2017/08/18 Javascript
vue在自定义组件中使用v-model进行数据绑定的方法
2019/03/25 Javascript
jQuery控制input只能输入数字和两位小数的方法
2019/05/16 jQuery
nodejs dgram模块广播+组播的实现示例
2019/11/04 NodeJs
Element Popover 弹出框的使用示例
2020/07/26 Javascript
Vue实现点击当前行变色
2020/12/14 Vue.js
JS实现百度搜索框
2021/02/25 Javascript
详解微信小程序(Taro)手动埋点和自动埋点的实现
2021/03/02 Javascript
[02:36]DOTA2英雄基础教程 斯拉克
2013/11/29 DOTA
[50:27]OG vs LGD 2018国际邀请赛淘汰赛BO3 第一场 8.26
2018/08/30 DOTA
Python生成短uuid的方法实例详解
2018/05/29 Python
python实现淘宝秒杀脚本
2020/06/23 Python
Python人工智能之路 之PyAudio 实现录音 自动化交互实现问答
2019/08/13 Python
python飞机大战pygame游戏背景设计详解
2019/12/17 Python
python matplotlib包图像配色方案分享
2020/03/14 Python
python使用Thread的setDaemon启动后台线程教程
2020/04/25 Python
Python导入父文件夹中模块并读取当前文件夹内的资源
2020/11/19 Python
英国电气世界:Electrical World
2019/09/08 全球购物
麦当劳印度网上订餐:McDelivery
2020/03/16 全球购物
EJB的几种类型
2012/08/15 面试题
个人四风问题整改措施思想汇报
2014/10/04 职场文书
机动车登记业务委托书
2014/10/08 职场文书
群众路线教育实践活动整改落实情况汇报
2014/10/28 职场文书
Python中文分词库jieba(结巴分词)详细使用介绍
2022/04/07 Python