python3 循环读取excel文件并写入json操作


Posted in Python onJuly 14, 2020

文件内容:

python3 循环读取excel文件并写入json操作

excel内容:

python3 循环读取excel文件并写入json操作

代码:

import xlrd
import json
import operator
 
def read_xlsx(filename):
 # 打开excel文件
 data1 = xlrd.open_workbook(filename)
 # 读取第一个工作表
 table = data1.sheets()[0]
 # 统计行数
 n_rows = table.nrows
 
 data = []
 
 # 微信文章属性:wechat_name wechat_id title abstract url time read like number
 for v in range(1, n_rows-1):
  # 每一行数据形成一个列表
  values = table.row_values(v)
  # 列表形成字典
  data.append({'wechat_name': values[0],
      'wechat_id': values[1],
      'title':  values[2],
      'abstract': values[3],
      'url':   values[4],
      'time':  values[5],
      'read':  values[6],
      'like':  values[7],
      'number':  values[8],
      })
 # 返回所有数据
 return data
 
if __name__ == '__main__':
 d = []
 # 循环打开每个excel
 for i in range(1, 16):
  d1 = read_xlsx('./excel data/'+str(i)+'.xlsx')
  d.extend(d1)
 
 # 微信文章属性
 # 按时间升序排列
 d = sorted(d, key=operator.itemgetter('time'))
 # 写入json文件
 with open('article.json', 'w', encoding='utf-8') as f:
  f.write(json.dumps(d, ensure_ascii=False, indent=2))
 
 name = []
 # 微信id写文件
 f1 = open('wechat_id.txt', 'w')
 for i in d:
  if i['wechat_id'] not in name:
   name.append(i['wechat_id'])
  f1.writelines(i['wechat_id'])
  f1.writelines('\n')
 
 print(len(name))

结果:

python3 循环读取excel文件并写入json操作

补充知识:Python mysql数据 读取时间参数 for循环写入Excel文件

最近在利用Python 实现自动化表报时,有个功能是mysql的业务时间是读取模板文件的时间参数,需要用到for循环功能,基本思路是:

1.自动创建一个输出文件的文件夹

2.根据模板文件创建一个新的excel文件到新创建的文件夹中

3.每次写入时返回sheet的最大行数max_row,下次写入时从最大行的下一行开始继续写入

4.每次读取必须为同一个文件

代码如下:

#! /usr/bin/env python
# -*- coding:utf-8 -*-
 
import MySQLdb
from openpyxl import load_workbook
import sys
import time
import os
 
reload(sys)
sys.setdefaultencoding('utf8')
 
# 打开数据库连接
db = MySQLdb.connect(host="localhost", user="zimu", passwd="zimu", db="xxx", port=0000,charset='utf8')
 
template_file_demo = r"D:\path\demo.xlsx"
# makedirs 创建文件时如果路径不存在会创建这个路径
output_path = r"D:\output\demo"+"_"+ time.strftime("%Y%m%d", time.localtime()) +"_" + str(int(time.time()))+"\\"
os.makedirs(output_path)
#创建文件到新创建的文件夹中
book_demo = load_workbook(template_file_demo)
book_demo.save(output_path + "demo" +"_"+time.strftime("%Y%m%d", time.localtime())+".xlsx")
#读取指定文件夹下的文件
demo_file = output_path+"demo"+"_"+time.strftime("%Y%m%d", time.localtime())+".xlsx"
 
def savedata(start_time,end_time):
	demosql = '''select * from demo where start_date<='%s' and end_date>='%s''''%(start_time,end_time)
  cursor = db.cursor()
  cursor.execute(demosql)
  demodata = cursor.fetchall()
 
  demo_book = load_workbook(demo_file)
  demosheet = demo_book['demo']
  row_t = demosheet.max_row
 
  i = 0
  while i < len(demodata):
    for j in range(0, 8):
      demosheet.cell(row_t + i + 1, j + 1).value = demodata[i][j]
    i += 1
    demo_book.save(output_path+"demo"+"_"+time.strftime("%Y%m%d", time.localtime())+".xlsx")
 
book_template = load_workbook(template_file_demo)
timet = book_template['时间配置']
for t in range(2, timet.max_row + 1): # 读取配置表中的时间
  savedata(timet.cell(t, 1).value, timet.cell(t, 2).value)

5.模板文件的时间参数设置如下:

python3 循环读取excel文件并写入json操作

以上这篇python3 循环读取excel文件并写入json操作就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
深入浅析python中的多进程、多线程、协程
Jun 22 Python
python3新特性函数注释Function Annotations用法分析
Jul 28 Python
Python调用C# Com dll组件实战教程
Oct 12 Python
tensorflow识别自己手写数字
Mar 14 Python
python爬虫之自动登录与验证码识别
Jun 15 Python
python文件拆分与重组实例
Dec 10 Python
python中pytest收集用例规则与运行指定用例详解
Jun 27 Python
关于Pytorch的MLP模块实现方式
Jan 07 Python
python实现人机五子棋
Mar 25 Python
Python新建项目自动添加介绍和utf-8编码的方法
Dec 26 Python
使用Pytorch实现two-head(多输出)模型的操作
May 28 Python
使用qt quick-ListView仿微信好友列表和聊天列表的示例代码
Jun 13 Python
Python爬虫实例——scrapy框架爬取拉勾网招聘信息
Jul 14 #Python
Python爬虫爬取新闻资讯案例详解
Jul 14 #Python
Win10下配置tensorflow-gpu的详细教程(无VS2015/2017)
Jul 14 #Python
Python实现图片查找轮廓、多边形拟合、最小外接矩形代码
Jul 14 #Python
python操作微信自动发消息的实现(微信聊天机器人)
Jul 14 #Python
python如何写try语句
Jul 14 #Python
Python操作MySQL数据库的示例代码
Jul 13 #Python
You might like
php递归列出所有文件和目录的代码
2008/09/10 PHP
php 获取全局变量的代码
2011/04/21 PHP
php程序的国际化实现方法(利用gettext)
2011/08/14 PHP
深入php函数file_get_contents超时处理的方法详解
2013/06/03 PHP
浅析ThinkPHP中execute和query方法的区别
2014/06/13 PHP
js中判断数字\字母\中文的正则表达式 (实例)
2012/06/29 Javascript
引用其它js时如何同时处理多个window.onload事件
2014/09/02 Javascript
jQuery遍历json的方法(推荐)
2016/06/12 Javascript
浅谈jQuery this和$(this)的区别及获取$(this)子元素对象的方法
2016/11/29 Javascript
简单几步实现返回顶部效果
2016/12/05 Javascript
JS验证input输入框(字母,数字,符号,中文)
2017/03/23 Javascript
如何使用angularJs
2017/05/08 Javascript
NodeJS使用七牛云存储上传文件的方法
2017/07/24 NodeJs
详谈Node.js之操作文件系统
2017/08/29 Javascript
常用的9个JavaScript图表库详解
2017/12/19 Javascript
vue中阻止click事件冒泡,防止触发另一个事件的方法
2018/02/08 Javascript
vue中的计算属性实例详解
2018/09/19 Javascript
node 标准输入流和输出流代码实例
2019/09/19 Javascript
小程序实现长按保存图片的方法
2019/12/31 Javascript
解决vue prop传值default属性如何使用,为何不生效的问题
2020/09/21 Javascript
解决VantUI popup 弹窗不弹出或无蒙层的问题
2020/11/03 Javascript
itchat和matplotlib的结合使用爬取微信信息的实例
2017/08/25 Python
示例详解Python3 or Python2 两者之间的差异
2018/08/23 Python
python频繁写入文件时提速的方法
2019/06/26 Python
linux中如何使用python3获取ip地址
2019/07/15 Python
解决Python3用PIL的ImageFont输出中文乱码的问题
2019/08/22 Python
CSS3颜色值RGBA与渐变色使用介绍
2020/03/06 HTML / CSS
AmazeUI底部导航栏与分享按钮的示例代码
2020/08/18 HTML / CSS
英国马莎百货印度官网:Marks & Spencer印度
2020/10/08 全球购物
安徽导游词
2015/02/12 职场文书
莫言获奖感言(全文)
2015/07/31 职场文书
2016年优秀少先队员事迹材料
2016/02/26 职场文书
2019员工保密协议书(3篇)
2019/09/23 职场文书
自定义函数实现单词排序并运用于PostgreSQL(实现代码)
2021/04/22 PostgreSQL
Python 中random 库的详细使用
2021/06/03 Python
常用的MongoDB查询语句的示例代码
2021/07/25 MongoDB