用Python实现校园通知更新提醒功能


Posted in Python onNovember 23, 2019

前言

这个项目实已经在一个月前已经完成了,一直都想写一篇博客来总结这个过程中遇到的一些问题。但最近一个月来都比较忙,所以一直拖到了现在。

首先说说起因吧,我没事的时候,总喜欢依次点开学校主页、教务处、图书馆以及学院的网站,看看有没有什么新通知,虽然大多与我无关。恰逢最近正在学Python,经常听到别人说用Python写爬虫很简单,但自己尚未接触过爬虫。于是抱着试一试的心态看了几篇关于Python爬虫的博客,发现实现起来的确很简单。于是,便一边看着官方的文档说明,一边看着别人的博客,终于完成了自己的第一次爬虫。

简介

使用urllib.request库获取到目标url(各个网站的'更多通知'页)的源代码,然后利用Python的re库进行正则匹配,提取到通知相关信息后,与文件中存取的上一次爬取到的信息进行对比。

若检测到有新的通知,则利用twilio库向指定手机号码发送SMS,利用smtplib库向指定邮箱发送提醒信息。

此外,还具有发送日志以及异常日志的功能。

目前仅支持本校的通知提醒,后续会逐步提高项目的通用性。

源码:

Github地址:School_Notice

准备工作

安装twilio库:pip install twilio

注册twilio账号:Twilio

验证手机号:用来接收短信提醒的号码必须在twilio上进行验证

遇到的问题

邮件发送

若用名为msg的变量来保存邮件文本,则msg['From']以及msg['To']必须为实际的发件人地址,否则可能会出现异常:SMTPDataError(code, resp).如必须写作:msg['From'] = 'xxxxx@qq.com'.我是使用的QQ邮箱来发邮件,至于其他邮箱需不需要这样写还不清楚。

原本想用一个for循环来实现多人发送,后来发现smtplib库的sendmail方法支持多人发送,但参数应为一个list,故可用str.split(',')将字符串转为list。

我使用的是Windows下的Python,若计算机名为中文,则有可能会导致出现异常,可通过右击此电脑->属性,修改计算机名。

程序代码中使用的邮箱密码不是QQ密码,应在邮箱设置->账户->SMTP服务处,获取授权码。

其他问题

有时候会接收不到Twilio发送的短信,给10086打电话也没问出个所以然,可能是因为短信中有敏感词(如:学校名),修改短信内容后就可以了

对上述几个网站的源码使用re.findall后返回的列表中的每个元组中的元素的顺序均为时间、标题、链接,但对学生处网站的源码正则匹配后的元素顺序并不是按照上述顺序的。所以应单独进行调整,但直接修改一个元组中的元素,会出现异常:error:tuple' object does not support item assignment。

解决方法是:

if(subject_EN == 'snnu_xsc'):
 new_data = []
 for item in data:
  temp = (item[1], item[2], item[0])
  new_data.append(temp)
 data = new_data

Python3中的print函数是自动换行的,若不需要自动换行,则可写作:print(str,end='')

不同网站的编码格式可能不同,应按照各自的编码方式进行解码。若均采用utf-8的方式,则可能会出现各种编码问题,如:

UnicodeDecodeError: ‘utf-8' codec can't decode byte 0xc9 in position 167

解决方法是:

if find1 == -1 & find2 == -1:
 Coding = 'utf-8'
else:
 # 教务处网页源码编码格式为为gbk
 # 学生处网页源码编码格式为gb2312
 Coding = 'gbk'
data = response.read().decode(Coding)

Python程序打包为exe(Pyinstaller)

安装及使用

使用pip install pywin32安装pywin32

使用pip install PyInstaller安装Pyinstaller

使用pyinstaller -F main.py即可将Python程序打包为exe程序

注意事项

打包之前应将用到的第三方库(此项目仅用到Twilio)复制到与要打包的py文件同一目录下。

可使用pyinstaller -F -i logo.ico main.py,为生成的exe程序添加图标

使用的ico文件像素不能过小,否则有可能出现:打包后的程序图标只有在资源管理器中设置为以小图标查看的情况下才显示的是自己的图标,其他情况仍未默认图标

使用截图

用Python实现校园通知更新提醒功能

用Python实现校园通知更新提醒功能

用Python实现校园通知更新提醒功能

以上这篇用Python实现校园通知更新提醒功能就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
用python删除java文件头上版权信息的方法
Jul 31 Python
Python简单进程锁代码实例
Apr 27 Python
详解Django框架中用context来解析模板的方法
Jul 20 Python
Python中死锁的形成示例及死锁情况的防止
Jun 14 Python
Python实现的手机号归属地相关信息查询功能示例
Jun 08 Python
python实现定时自动备份文件到其他主机的实例代码
Feb 23 Python
浅谈pycharm出现卡顿的解决方法
Dec 03 Python
解决springboot yml配置 logging.level 报错问题
Feb 21 Python
pycharm设置默认的UTF-8编码模式的方法详解
Jun 01 Python
django 获取字段最大值,最新的记录操作
Aug 09 Python
python实现图片转换成素描和漫画格式
Aug 19 Python
全网最全python库selenium自动化使用详细教程
Jan 12 Python
利用Python的turtle库绘制玫瑰教程
Nov 23 #Python
Python input函数使用实例解析
Nov 22 #Python
python循环输出三角形图案的例子
Nov 22 #Python
Python-Flask:动态创建表的示例详解
Nov 22 #Python
python flask中动态URL规则详解
Nov 22 #Python
Python之——生成动态路由轨迹图的实例
Nov 22 #Python
python:动态路由的Flask程序代码
Nov 22 #Python
You might like
首页四格,首页五格For6.0(GBK)(UTF-8)[12种组合][9-18][版主安装测试通过]
2007/09/24 PHP
yii框架配置默认controller和action示例
2014/04/30 PHP
Thinkphp的volist标签嵌套循环使用教程
2014/07/08 PHP
浅谈PHP中的数据传输CURL
2016/09/06 PHP
tp5(thinkPHP5)框架数据库Db增删改查常见操作总结
2019/01/10 PHP
PHP微商城开源代码实例
2019/03/27 PHP
JavaScript小技巧 2.5 则
2010/09/12 Javascript
DIV外区域Click后关闭DIV的实现代码
2011/12/21 Javascript
js中的replace方法使用介绍
2013/10/28 Javascript
jQuery之DOM对象和jQuery对象的转换与区别分析
2015/01/08 Javascript
基于jQuery实现的双11天猫拆红包抽奖效果
2015/12/01 Javascript
一道关于JavaScript变量作用域的面试题
2016/03/08 Javascript
js enter键激发事件实例代码
2016/08/17 Javascript
在js里怎么实现Xcode里的callFuncN方法(详解)
2016/11/05 Javascript
bootstrap-datetimepicker实现只显示到日期的方法
2016/11/25 Javascript
javascript实现去除HTML标签的方法
2016/12/26 Javascript
nodejs批量下载图片的实现方法
2017/05/19 NodeJs
简单谈谈axios中的get,post方法
2017/06/25 Javascript
深入理解requireJS-实现一个简单的模块加载器
2018/01/15 Javascript
python连接oracle数据库实例
2014/10/17 Python
一些Centos Python 生产环境的部署命令(推荐)
2018/05/07 Python
Python使用pyodbc访问数据库操作方法详解
2018/07/05 Python
python 高阶函数简单介绍
2021/02/19 Python
详解HTML5中rel属性的prefetch预加载功能使用
2016/05/06 HTML / CSS
NBA欧洲商店(法国):NBA Europe Store FR
2016/10/19 全球购物
碧欧泉法国官网:Biotherm法国
2019/10/23 全球购物
大学本科毕业生的自我鉴定范文
2013/11/19 职场文书
迎新晚会邀请函
2014/02/01 职场文书
法学专业自我鉴定
2014/02/05 职场文书
一年级评语大全
2014/04/23 职场文书
奖金申请报告模板
2015/05/15 职场文书
周末问候语大全
2015/11/10 职场文书
六种css3实现的边框过渡效果
2021/04/22 HTML / CSS
Java常用工具类汇总 附示例代码
2021/06/26 Java/Android
Redis 持久化 RDB 与 AOF的执行过程
2021/11/07 Redis
浅谈JavaScript作用域
2021/12/06 Javascript