如何使用Python自动生成报表并以邮件发送


Posted in Python onOctober 15, 2020

数据分析师肯定每天都被各种各样的数据数据报表搞得焦头烂额,老板的,运营的、产品的等等。而且大部分报表都是重复性的工作,这篇文章就是帮助大家如何用Python来实现报表的自动发送,解放你的劳动力,可以让你有时间去做更有意思的事情。

首先来介绍下实现自动报表要使用到的Python库:

pymysql 一个可以连接MySQL实例并且实现增删改查功能的库
datetime Python标准库中自带的关于时间的库
openpyxl 一个可以读写07版以后的Excel文档(.xlsx格式也支持)的库
smtplib SMTP即简单邮件传输协议,Python简单封装成了一个库
email 一个用来处理邮件消息的库
为什么使用openpyxl库来处理Excel呢?因为它支持每个sheet的行数为100W+,也是支持xlsx格式的文件。如果你接受xls文件,并且每个sheet的行数小于6W,也是可以使用xlwt库,它对大文件的读取速度要大于openpyxl。

接下来我们就进入实战部分,来正式实现这个过程。我把整个实现过程分成几个函数的方式来实现,这样看着会比较有结构感。

一、首先导入所有要用到的库

# encoding=utf-8
import pymysql as pms
import openpyxl
import datetime
from email.mime.text import MIMEText
from email.mime.multipart import MIMEMultipart
from email.header import Header
import smtplib

二、 编写一个传入sql就返回数据的函数get_datas(sql)

def get_datas(sql):
  # 一个传入sql导出数据的函数
  # 跟数据库建立连接
  conn = pms.connect(host='实例地址', user='用户',
            passwd='密码', database='库名', port=3306, charset="utf8")
  # 使用 cursor() 方法创建一个游标对象 cursor
  cur = conn.cursor()
  # 使用 execute() 方法执行 SQL
  cur.execute(sql)
  # 获取所需要的数据
  datas = cur.fetchall()
  #关闭连接
  cur.close()
  #返回所需的数据
  return datas

三、 编写一个传入sql就返回数据的字段名称的函数get_datas(sql),因为一个函数只能返回一个值,这边就用2个函数来分别返回数据和字段名称(也就是excel里的表头)

def get_fields(sql):
  # 一个传入sql导出字段的函数
  conn = pms.connect(host='rm-rj91p2yhl9dm2xmbixo.mysql.rds.aliyuncs.com', user='bi-analyzer',
            passwd='pcNzcKPnn', database='kikuu', port=3306, charset="utf8")
  cur = conn.cursor()
  cur.execute(sql)
  # 获取所需要的字段名称
  fields = cur.description
  cur.close()
  return fields

四、 编写一个传入数据、字段名称、存储地址返回一个excel 的函数et_excel(data, field, file)

def get_excel(data, field, file):
  # 将数据和字段名写入excel的函数
  #新建一个工作薄对象
  new = openpyxl.Workbook()
  #激活一个新的sheet
  sheet = new.active
  #给sheet命名
  sheet.title = '数据展示'
  #将字段名称循环写入excel第一行,因为字段格式列表里包含列表,每个列表的第一元素才是字段名称
  for col in range(len(field)):
    #row代表行数,column代表列数,value代表单元格输入的值,行数和列数都是从1开始,这点于python不同要注意
    _ = sheet.cell(row=1, column=col+1, value=u'%s' % field[col][0])
   #将数据循环写入excel的每个单元格中  
  for row in range(len(data)):
    for col in range(len(field)):
      #因为第一行写了字段名称,所以要从第二行开始写入
      _ = sheet.cell(row=row+2, column=col + 1, value=u'%s' % data[row][col])
      #将生成的excel保存,这步是必不可少的
  newworkbook = new.save(file)
  #返回生成的excel
  return newworkbook

五、 编写一个自动获取昨天日期字符串格式的函数getYesterday()

def getYesterday():
  # 获取昨天日期的字符串格式的函数
  #获取今天的日期
  today = datetime.date.today()
  #获取一天的日期格式数据
  oneday = datetime.timedelta(days=1)
  #昨天等于今天减去一天
  yesterday = today - oneday
  #获取昨天日期的格式化字符串
  yesterdaystr = yesterday.strftime('%Y-%m-%d')
  #返回昨天的字符串
  return yesterdaystr

六、编写一个生成邮件的函数create_email(email_from, email_to, email_Subject, email_text, annex_path, annex_name)

def create_email(email_from, email_to, email_Subject, email_text, annex_path, annex_name):
  # 输入发件人昵称、收件人昵称、主题,正文,附件地址,附件名称生成一封邮件
  #生成一个空的带附件的邮件实例
  message = MIMEMultipart()
  #将正文以text的形式插入邮件中
  message.attach(MIMEText(email_text, 'plain', 'utf-8'))
  #生成发件人名称(这个跟发送的邮件没有关系)
  message['From'] = Header(email_from, 'utf-8')
  #生成收件人名称(这个跟接收的邮件也没有关系)
  message['To'] = Header(email_to, 'utf-8')
  #生成邮件主题
  message['Subject'] = Header(email_Subject, 'utf-8')
  #读取附件的内容
  att1 = MIMEText(open(annex_path, 'rb').read(), 'base64', 'utf-8')
  att1["Content-Type"] = 'application/octet-stream'
  #生成附件的名称
  att1["Content-Disposition"] = 'attachment; filename=' + annex_name
  #将附件内容插入邮件中
  message.attach(att1)
  #返回邮件
  return message

七、 生成一个发送邮件的函数send_email(sender, password, receiver, msg)

def send_email(sender, password, receiver, msg):
  # 一个输入邮箱、密码、收件人、邮件内容发送邮件的函数
  try:
    #找到你的发送邮箱的服务器地址,已加密的形式发送
    server = smtplib.SMTP_SSL("smtp.mxhichina.com", 465) # 发件人邮箱中的SMTP服务器
    server.ehlo()
    #登录你的账号
    server.login(sender, password) # 括号中对应的是发件人邮箱账号、邮箱密码
    #发送邮件
    server.sendmail(sender, receiver, msg.as_string()) # 括号中对应的是发件人邮箱账号、收件人邮箱账号(是一个列表)、邮件内容
    print("邮件发送成功")
    server.quit() # 关闭连接
  except Exception:
    print(traceback.print_exc())
    print("邮件发送失败")

八、建立一个main函数,把所有的自定义内容输入进去,最后执行main函数

def main():
  print(datetime.datetime.now())
  my_sql = sql = "SELECT a.id '用户ID',\
      a.gmtCreate '用户注册时间',\
      af.lastLoginTime '最后登录时间',\
      af.totalBuyCount '历史付款子单数',\
      af.paidmountUSD '历史付款金额',\
      af.lastPayTime '用户最后支付时间'\
     FROM table a\
   LEFT JOIN tableb af ON a.id= af.accountId ;"
  # 生成数据
  my_data = get_datas(my_sql)
  # 生成字段名称
  my_field = get_fields(my_sql)
  # 得到昨天的日期
  yesterdaystr = getYesterday()
  # 文件名称
  my_file_name = 'user attribute' + yesterdaystr + '.xlsx'
  # 文件路径
  file_path = 'D:/work/report/' + my_file_name
  # 生成excel
  get_excel(my_data, my_field, file_path)

  my_email_from = 'BI部门自动报表机器人'
  my_email_to = '运营部'
  # 邮件标题
  my_email_Subject = 'user' + yesterdaystr
  # 邮件正文
  my_email_text = "Dear all,\n\t附件为每周数据,请查收!\n\nBI团队 "
  #附件地址
  my_annex_path = file_path
  #附件名称
  my_annex_name = my_file_name
  # 生成邮件
  my_msg = create_email(my_email_from, my_email_to, my_email_Subject,
             my_email_text, my_annex_path, my_annex_name)
  my_sender = '阿里云邮箱'
  my_password = '我的密码'
  my_receiver = [10001@qq.com']#接收人邮箱列表
  # 发送邮件
  send_email(my_sender, my_password, my_receiver, my_msg)
  print(datetime.datetime.now())

if __name__ == "__main__":
  main();

以上就是如何使用Python自动生成报表并以邮件发送的详细内容,更多关于python 生成报表邮件发送的资料请关注三水点靠木其它相关文章!

Python 相关文章推荐
python安装与使用redis的方法
Apr 19 Python
深入浅析python with语句简介
Apr 11 Python
python的常用模块之collections模块详解
Dec 06 Python
Python3利用Dlib实现摄像头实时人脸检测和平铺显示示例
Feb 21 Python
计算机二级python学习教程(2) python语言基本语法元素
May 16 Python
通过PYTHON来实现图像分割详解
Jun 26 Python
PyCharm 配置远程python解释器和在本地修改服务器代码
Jul 23 Python
Python搭建代理IP池实现检测IP的方法
Oct 27 Python
如何使用Python多线程测试并发漏洞
Dec 18 Python
使用Python和百度语音识别生成视频字幕的实现
Apr 09 Python
Jupyter安装链接aconda实现过程图解
Nov 02 Python
python神经网络 使用Keras构建RNN训练
May 04 Python
如何在Win10系统使用Python3连接Hive
Oct 15 #Python
Python进行特征提取的示例代码
Oct 15 #Python
Python通过递归函数输出嵌套列表元素
Oct 15 #Python
Python安装第三方库攻略(pip和Anaconda)
Oct 15 #Python
Python return语句如何实现结果返回调用
Oct 15 #Python
python 进程池pool使用详解
Oct 15 #Python
python 输入字符串生成所有有效的IP地址(LeetCode 93号题)
Oct 15 #Python
You might like
15种PHP Encoder的比较
2007/03/06 PHP
PHP性能优化工具篇Benchmark类调试执行时间
2011/12/06 PHP
php-msf源码详解
2017/12/25 PHP
PHP实现新型冠状病毒疫情实时图的实例
2020/02/04 PHP
JavaScript中的new的使用方法与注意事项
2007/05/16 Javascript
jQuery构造函数init参数分析续
2015/05/13 Javascript
javascript实现带下拉子菜单的导航菜单效果
2015/05/14 Javascript
JavaScript中setFullYear()方法的使用详解
2015/06/11 Javascript
JS实现仿新浪微博发布内容为空时提示功能代码
2015/08/19 Javascript
如何利用模板将HTML从JavaScript中抽离
2016/10/08 Javascript
浅谈angularjs module返回对象的坑(推荐)
2016/10/21 Javascript
Bootstrap的基本应用要点浅析
2016/12/19 Javascript
angularjs过滤器--filter与ng-repeat配合有奇效
2017/04/20 Javascript
详解VueJs中的V-bind指令
2018/05/03 Javascript
微信小程序实现topBar底部选择栏效果
2018/07/20 Javascript
[56:24]DOTA2上海特级锦标赛主赛事日 - 3 胜者组第二轮#1Liquid VS MVP.Phx第二局
2016/03/04 DOTA
为Python程序添加图形化界面的教程
2015/04/29 Python
Zabbix实现微信报警功能
2016/10/09 Python
python中闭包Closure函数作为返回值的方法示例
2017/12/17 Python
OPENCV去除小连通区域,去除孔洞的实例讲解
2018/06/21 Python
Python退火算法在高次方程的应用
2018/07/26 Python
pytorch 在sequential中使用view来reshape的例子
2019/08/20 Python
PyCharm 2020.2.2 x64 下载并安装的详细教程
2020/10/15 Python
Python析构函数__del__定义原理解析
2020/11/20 Python
使用css3制作登录表单的步骤
2014/04/07 HTML / CSS
网络公司美工设计工作个人的自我评价
2013/11/03 职场文书
秘书岗位职责
2013/11/18 职场文书
写给女朋友的道歉信
2014/01/08 职场文书
珍惜资源保护环境的建议书
2014/05/14 职场文书
春秋淹城导游词
2015/02/11 职场文书
档案管理员岗位职责
2015/02/12 职场文书
大学生党员个人总结
2015/02/13 职场文书
医院合作意向书范本
2015/05/08 职场文书
学校教学管理制度
2015/08/06 职场文书
关于python3 opencv 图像二值化的问题(cv2.adaptiveThreshold函数)
2022/04/04 Python
SpringBoot接入钉钉自定义机器人预警通知
2022/07/15 Java/Android