Python实现把json格式转换成文本或sql文件


Posted in Python onJuly 10, 2015

python如何将json格式的数据快速的转化成指定格式的数据呢?或者转换成sql文件?

下面的例子是将json格式的数据准换成以#_#分割的文本数据,也可用于生成sql文件。

[root@bogon tutorial]# vi json2txt.py 
#-*- coding: UTF-8 -*-
import json

data = []
with open('./tencent_test.json') as f:
  for line in f:
    data.append(json.loads(line))

#print json.dumps(data, ensure_ascii=False)


import codecs
file_object = codecs.open('tencent.txt', 'w' ,"utf-8")
str = "\r\n"
splitstr = "#_#"
for item in data:
  #print json.dumps(item)
  #str = str + "insert into tencent(name,catalog,workLocation,recruitNumber,detailLink,publishTime) values "
  #str = str + "'%s','%s','%s','%s','%s'\r\n" % (item['parentTitle'],item['parentLink'],item['author'],item['link'],item['title'])
  #print json.loads(item['author']) + "\r\n"
  str = "%s#_#%s#_#%s#_#%s#_#%s\r\n" % (item['parentTitle'],item['parentLink'],item['author'],item['link'],item['title'].strip())
  file_object.write(str)

#import codecs
#file_object = codecs.open('tencent.txt', 'w' ,"utf-8")
#file_object.write(str)
file_object.close()
print "success"

注:如果数据量过大不宜全部放在str里一次性写入文件。可以考虑逐行写入,或者到达一定程度时批量写入。

另外:python通过strip(rm)替换字符串,当rm为空时,默认删除空白符(包括'\n', '\r',  '\t',  ' ')。

测试:

json格式的数据

[root@bogon tutorial]# vi tencent_test.json 

{"author": "作者", "parentTitle": "父标题", "title": "标题", "pageUrl": "pageurl", "link": "linkurl", "parentLink": "parenturl"}
{"author": "作者", "parentTitle": "父标题", "title": "标题", "pageUrl": "pageurl", "link": "linkurl", "parentLink": "parenturl"}
{"author": "作者", "parentTitle": "父标题", "title": "标题", "pageUrl": "pageurl", "link": "linkurl", "parentLink": "parenturl"}
{"author": "作者", "parentTitle": "父标题", "title": "标题", "pageUrl": "pageurl", "link": "linkurl", "parentLink": "parenturl"}
{"author": "作者", "parentTitle": "父标题", "title": "标题", "pageUrl": "pageurl", "link": "linkurl", "parentLink": "parenturl"}
{"author": "作者", "parentTitle": "父标题", "title": "标题", "pageUrl": "pageurl", "link": "linkurl", "parentLink": "parenturl"}
{"author": "作者", "parentTitle": "父标题", "title": "标题", "pageUrl": "pageurl", "link": "linkurl", "parentLink": "parenturl"}
{"author": "作者", "parentTitle": "父标题", "title": "标题", "pageUrl": "pageurl", "link": "linkurl", "parentLink": "parenturl"}
{"author": "作者", "parentTitle": "父标题", "title": "标题", "pageUrl": "pageurl", "link": "linkurl", "parentLink": "parenturl"}
{"author": "作者", "parentTitle": "父标题", "title": "标题", "pageUrl": "pageurl", "link": "linkurl", "parentLink": "parenturl"}
{"author": "作者", "parentTitle": "父标题", "title": "标题", "pageUrl": "pageurl", "link": "linkurl", "parentLink": "parenturl"}

运行python json2txt.py

[root@bogon tutorial]# python json2txt.py 
success
[root@bogon tutorial]# more tencent.txt 
父标题#_#parenturl#_#作者#_#linkurl#_#标题
父标题#_#parenturl#_#作者#_#linkurl#_#标题
父标题#_#parenturl#_#作者#_#linkurl#_#标题
父标题#_#parenturl#_#作者#_#linkurl#_#标题
父标题#_#parenturl#_#作者#_#linkurl#_#标题
父标题#_#parenturl#_#作者#_#linkurl#_#标题
父标题#_#parenturl#_#作者#_#linkurl#_#标题
父标题#_#parenturl#_#作者#_#linkurl#_#标题
父标题#_#parenturl#_#作者#_#linkurl#_#标题
父标题#_#parenturl#_#作者#_#linkurl#_#标题
父标题#_#parenturl#_#作者#_#linkurl#_#标题
Python 相关文章推荐
netbeans7安装python插件的方法图解
Dec 24 Python
python实现多线程暴力破解登陆路由器功能代码分享
Jan 04 Python
Python实现数据库编程方法详解
Jun 09 Python
PyCharm使用教程之搭建Python开发环境
Jun 07 Python
浅谈Python中的zip()与*zip()函数详解
Feb 24 Python
Python实现修改IE注册表功能示例
May 10 Python
使用k8s部署Django项目的方法步骤
Jan 14 Python
pandas 使用均值填充缺失值列的小技巧分享
Jul 04 Python
numpy库ndarray多维数组的维度变换方法(reshape、resize、swapaxes、flatten)
Apr 28 Python
在Ubuntu 20.04中安装Pycharm 2020.1的图文教程
Apr 30 Python
Python map及filter函数使用方法解析
Aug 06 Python
Python中递归以及递归遍历目录详解
Oct 24 Python
Python中的一些陷阱与技巧小结
Jul 10 #Python
Python中的fileinput模块的简单实用示例
Jul 09 #Python
Python中的anydbm模版和shelve模版使用指南
Jul 09 #Python
python冒泡排序简单实现方法
Jul 09 #Python
python基于BeautifulSoup实现抓取网页指定内容的方法
Jul 09 #Python
python简单猜数游戏实例
Jul 09 #Python
Python使用turtule画五角星的方法
Jul 09 #Python
You might like
php中函数的形参与实参的问题说明
2010/09/01 PHP
php 5.6版本中编写一个PHP扩展的简单示例
2015/01/20 PHP
php中ob函数缓冲机制深入理解
2015/08/03 PHP
浅谈PHP链表数据结构(单链表)
2016/06/08 PHP
文字幻灯片
2006/06/26 Javascript
jQuery EasyUI API 中文文档 - PropertyGrid属性表格
2011/11/18 Javascript
通过JQuery实现win8一样酷炫的动态磁贴效果(示例代码)
2013/07/13 Javascript
javascript避免数字计算精度误差的方法详解
2014/03/05 Javascript
js触发select onchange事件的小技巧
2014/08/05 Javascript
jQuery+CSS3文字跑马灯特效的简单实现
2016/06/25 Javascript
vue.js将unix时间戳转换为自定义时间格式
2017/01/03 Javascript
基于jQuery实现的单行公告活动轮播效果
2017/08/23 jQuery
vue实现在表格里,取每行的id的方法
2018/03/09 Javascript
详解vue-cli中模拟数据的两种方法
2018/07/03 Javascript
js实现弹出框的拖拽效果实例代码详解
2019/04/16 Javascript
利用JavaScript将Excel转换为JSON示例代码
2019/06/14 Javascript
JS前端基于canvas给图片添加水印
2020/11/11 Javascript
python中使用smtplib和email模块发送邮件实例
2014/04/22 Python
Python栈类实例分析
2015/06/15 Python
Python字典,函数,全局变量代码解析
2017/12/18 Python
Python3导入CSV文件的实例(跟Python2有些许的不同)
2018/06/22 Python
Python类和对象的定义与实际应用案例分析
2018/12/27 Python
零基础使用Python读写处理Excel表格的方法
2019/05/02 Python
使用Pandas将inf, nan转化成特定的值
2019/12/19 Python
Python+Appium实现自动化测试的使用步骤
2020/03/24 Python
Django如何实现防止XSS攻击
2020/10/13 Python
python 解决函数返回return的问题
2020/12/05 Python
介绍JAVA 中的Collection FrameWork(及如何写自己的数据结构)
2014/10/31 面试题
不假外出检讨书
2014/01/27 职场文书
医学生毕业自我鉴定
2014/03/26 职场文书
股指期货心得体会
2014/09/13 职场文书
见习报告格式范文
2014/11/08 职场文书
大学团日活动总结书
2015/05/11 职场文书
2019年度政务公开考核工作总结模板
2019/11/11 职场文书
go语言基础 seek光标位置os包的使用
2021/05/09 Golang
windows11怎么查看wifi密码? win11查看wifi密码的技巧
2021/11/21 数码科技