python实现批量监控网站


Posted in Python onSeptember 09, 2016

最近又新上了一部分站点,随着站点的增多,管理复杂性也上来了,俗话说:人多了不好带,我发现站点多了也不好管,因为这些站点里有重要的也有不重要的,重要核心的站点当然就管理的多一些,像一些万年都不出一次问题的,慢慢就被自己都淡忘了,冷不丁那天出个问题,还的手忙脚乱的去紧急处理,所以规范的去管理这些站点是很有必要的,今天我们就做第一步,不管大站小站,先统一把监控做起来,先不说业务情况,最起码那个站点不能访问了,要第一时间报出来,别等着业务方给你反馈,就显得我们不够专业了,那接下来我们看看如果用python实现多网站的可用性监控,脚本如下:

#!/usr/bin/env python
 
 
import pickle, os, sys, logging
from httplib import HTTPConnection, socket
from smtplib import SMTP
 
def email_alert(message, status):
  fromaddr = 'xxx@163.com'
  toaddrs = 'xxxx@qq.com'
  
  server = SMTP('smtp.163.com:25')
  server.starttls()
  server.login('xxxxx', 'xxxx')
  server.sendmail(fromaddr, toaddrs, 'Subject: %s\r\n%s' % (status, message))
  server.quit()
 
def get_site_status(url):
  response = get_response(url)
  try:
    if getattr(response, 'status') == 200:
      return 'up'
  except AttributeError:
    pass
  return 'down'
    
def get_response(url):
  try:
    conn = HTTPConnection(url)
    conn.request('HEAD', '/')
    return conn.getresponse()
  except socket.error:
    return None
  except:
    logging.error('Bad URL:', url)
    exit(1)
    
def get_headers(url):
  response = get_response(url)
  try:
    return getattr(response, 'getheaders')()
  except AttributeError:
    return 'Headers unavailable'
 
def compare_site_status(prev_results):
  
  def is_status_changed(url):
    status = get_site_status(url)
    friendly_status = '%s is %s' % (url, status)
    print friendly_status
    if urlin prev_resultsand prev_results[url] != status:
      logging.warning(status)
      email_alert(str(get_headers(url)), friendly_status)
    prev_results[url] = status
 
  return is_status_changed
 
def is_internet_reachable():
  if get_site_status('www.baidu.com') == 'down' and get_site_status('www.sohu.com') == 'down':
    return False
  return True
  
def load_old_results(file_path):
  pickledata = {}
  if os.path.isfile(file_path):
    picklefile = open(file_path, 'rb')
    pickledata = pickle.load(picklefile)
    picklefile.close()
  return pickledata
  
def store_results(file_path, data):
  output = open(file_path, 'wb')
  pickle.dump(data, output)
  output.close()
  
def main(urls):
  logging.basicConfig(level=logging.WARNING, filename='checksites.log', 
      format='%(asctime)s %(levelname)s: %(message)s', 
      datefmt='%Y-%m-%d %H:%M:%S')
  
  pickle_file = 'data.pkl'
  pickledata = load_old_results(pickle_file)
  print pickledata
    
  if is_internet_reachable():
    status_checker = compare_site_status(pickledata)
    map(status_checker, urls)
  else:
    logging.error('Either the world ended or we are not connected to the net.')
    
  store_results(pickle_file, pickledata)
 
if __name__ == '__main__':
  main(sys.argv[1:])

脚本核心点解释:

1、getattr()是python的内置函数,接收一个对象,可以根据对象属性返回对象的值。

2、compare_site_status()函数是返回的是一个内部定义的函数。

3、map(),需要2个参数,一个是函数,一个是序列,功能就是将序列中的每个元素应用函数方法。

Python 相关文章推荐
Python中的默认参数详解
Jun 24 Python
详解python中的文件与目录操作
Jul 11 Python
python记录程序运行时间的三种方法
Jul 14 Python
Python使用matplotlib模块绘制图像并设置标题与坐标轴等信息示例
May 04 Python
解决Shell执行python文件,传参空格引起的问题
Oct 30 Python
python集合常见运算案例解析
Oct 17 Python
python PIL/cv2/base64相互转换实例
Jan 09 Python
在pycharm中为项目导入anacodna环境的操作方法
Feb 12 Python
python GUI库图形界面开发之PyQt5信号与槽的高级使用技巧装饰器信号与槽详细使用方法与实例
Mar 06 Python
python多线程实现同时执行两个while循环的操作
May 02 Python
用opencv给图片换背景色的示例代码
Jul 08 Python
python调试工具Birdseye的使用教程
May 25 Python
利用python批量检查网站的可用性
Sep 09 #Python
Python如何判断数独是否合法
Sep 08 #Python
python框架django基础指南
Sep 08 #Python
python中星号变量的几种特殊用法
Sep 07 #Python
Python 实现 贪吃蛇大作战 代码分享
Sep 07 #Python
python 转换 Javascript %u 字符串为python unicode的代码
Sep 06 #Python
Python 编码处理-str与Unicode的区别
Sep 06 #Python
You might like
php查询mysql数据库并将结果保存到数组的方法
2015/03/18 PHP
重定向实现代码
2006/11/20 Javascript
用jquery模仿的a的title属性(兼容ie6/7)
2013/01/21 Javascript
jQuery筛选器children()案例详解(图文)
2013/02/17 Javascript
jquery中选择块并改变属性值的方法
2013/07/31 Javascript
JavaScript学习笔记之JS函数
2015/01/22 Javascript
纯JS打造网页中checkbox和radio的美化效果
2016/10/13 Javascript
带你了解session和cookie作用原理区别和用法
2017/08/14 Javascript
vue实现商城购物车功能
2017/11/27 Javascript
微信小程序实现随机验证码功能
2018/12/20 Javascript
9种方法优化jQuery代码详解
2020/02/04 jQuery
js实现九宫格抽奖
2020/03/19 Javascript
Python中操作文件之write()方法的使用教程
2015/05/25 Python
简介Django框架中可使用的各类缓存
2015/07/23 Python
详解Python网络爬虫功能的基本写法
2016/01/28 Python
实例讲解Python设计模式编程之工厂方法模式的使用
2016/03/02 Python
Python ldap实现登录实例代码
2016/09/30 Python
Python实现通讯录功能
2018/02/22 Python
Python OpenCV处理图像之图像像素点操作
2018/07/10 Python
python随机在一张图像上截取任意大小图片的方法
2019/01/24 Python
python 抓包保存为pcap文件并解析的实例
2019/07/23 Python
pytorch 获取层权重,对特定层注入hook, 提取中间层输出的方法
2019/08/17 Python
JupyterNotebook设置Python环境的方法步骤
2019/12/03 Python
python多线程实现同时执行两个while循环的操作
2020/05/02 Python
css3 border-radius属性详解
2017/07/05 HTML / CSS
使用phonegap创建联系人的实现方法
2017/03/30 HTML / CSS
我们是伦敦女孩:WalG
2018/01/08 全球购物
Brasty罗马尼亚:购买手表、香水、化妆品、珠宝
2020/04/21 全球购物
学生不讲诚信检讨书
2014/09/29 职场文书
2014年档案管理员工作总结
2014/12/01 职场文书
2015年宣传部工作总结范文
2015/03/31 职场文书
2015年质量管理工作总结范文
2015/05/18 职场文书
共青团优秀团员申请书(范文)
2019/08/15 职场文书
Python文件的操作示例的详细讲解
2021/04/08 Python
MongoDB误操作后使用oplog恢复数据
2022/04/11 MongoDB
python数字图像处理之图像的批量处理
2022/06/28 Python