python读取文本中数据并转化为DataFrame的实例


Posted in Python onApril 10, 2018

在技术问答中看到一个这样的问题,感觉相对比较常见,就单开一篇文章写下来。

从纯文本格式文件 “file_in”中读取数据,格式如下:

python读取文本中数据并转化为DataFrame的实例

需要输出成“file_out”,格式如下:

python读取文本中数据并转化为DataFrame的实例

数据的原格式是“类别:内容”,以空行“\n”为分条目,转换后变成一个条目一行,按照类别顺序依次写出内容。

建议读取后,使用pandas,把数据建立称DataFrame的表格。这样方便以后处理数据。但是原格式并不是通常的表格格式,所以要先做一些简单的处理。

#coding:utf8
import sys
from pandas import DataFrame  #DataFrame通常来装二维的表格
import pandas as pd      #pandas是流行的做数据分析的包
#建立字典,键和值都从文件里读出来。键是nam,age……,值是lili,jim……
dict_data={}
#打开文件
with open('file_in.txt','r')as df:
  #读每一行
  for line in df:
    #如果这行是换行符就跳过,这里用'\n'的长度来找空行
    if line.count('\n') == len(line):
      continue
    #对每行清除前后空格(如果有的话),然后用":"分割
    for kv in [line.strip().split(':')]:
      #按照键,把值写进去
      dict_data.setdefault(kv[0],[]).append(kv[1])
#print(dict_data)看看效果
#这是把键读出来成为一个列表
columnsname=list(dict_data.keys())
#建立一个DataFrame,列名即为键名,也就是nam,age……
frame = DataFrame(dict_data,columns=columnsname)
#把DataFrame输出到一个表,不要行名字和列名字
frame.to_csv('file_out0.txt',index=False,header=False)

以上这篇python读取文本中数据并转化为DataFrame的实例就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python中Django框架下的staticfiles使用简介
May 30 Python
Python利用ansible分发处理任务
Aug 04 Python
Pycharm学习教程(2) 代码风格
May 02 Python
Python操作mysql数据库实现增删查改功能的方法
Jan 15 Python
python2.7无法使用pip的解决方法(安装easy_install)
Apr 03 Python
Python中numpy模块常见用法demo实例小结
Mar 16 Python
python基于json文件实现的gearman任务自动重启代码实例
Aug 13 Python
python解释器spython使用及原理解析
Aug 24 Python
python-序列解包(对可迭代元素的快速取值方法)
Aug 24 Python
PyTorch 解决Dataset和Dataloader遇到的问题
Jan 08 Python
浅谈tensorflow 中的图片读取和裁剪方式
Jun 30 Python
Python爬虫 简单介绍一下Xpath及使用
Apr 26 Python
python实现百度语音识别api
Apr 10 #Python
Python Selenium Cookie 绕过验证码实现登录示例代码
Apr 10 #Python
浅谈pandas中Dataframe的查询方法([], loc, iloc, at, iat, ix)
Apr 10 #Python
python pandas dataframe 行列选择,切片操作方法
Apr 10 #Python
python3下实现搜狗AI API的代码示例
Apr 10 #Python
Python基于pycrypto实现的AES加密和解密算法示例
Apr 10 #Python
浅谈Pandas中map, applymap and apply的区别
Apr 10 #Python
You might like
PHP定时自动生成静态HTML的实现代码
2010/06/20 PHP
PHP操作数组相关函数
2011/02/03 PHP
php 面向对象的一个例子
2011/04/12 PHP
php常用字符串处理函数实例分析
2014/11/22 PHP
深入理解Javascript闭包 新手版
2010/12/28 Javascript
jquery获取iframe中的dom对象(两种方法)
2013/07/02 Javascript
js 动态加载事件的几种方法总结
2013/12/25 Javascript
js中substring和substr的定义和用法
2014/05/05 Javascript
JavaScript检查某个function是否是原生代码的方法
2014/08/20 Javascript
jQuery中position()方法用法实例
2015/01/16 Javascript
JavaScript使用Max函数返回两个数字中较大数的方法
2015/04/06 Javascript
jQuery+html5+css3实现圆角无刷新表单带输入验证功能代码
2015/08/21 Javascript
JS返回只包含数字类型的数组实例分析
2016/12/16 Javascript
jQuery实现的简单悬浮层功能完整实例
2017/01/23 Javascript
微信小程序实现授权登录
2019/05/15 Javascript
Vue的v-model的几种修饰符.lazy,.number和.trim的用法说明
2020/08/05 Javascript
浅析微信小程序自定义日历组件及flex布局最后一行对齐问题
2020/10/29 Javascript
vue3.0自定义指令(drectives)知识点总结
2020/12/27 Vue.js
Python操作sqlite3快速、安全插入数据(防注入)的实例
2014/04/26 Python
利用Python如何生成随机密码
2016/04/20 Python
matplotlib savefig 保存图片大小的实例
2018/05/24 Python
pycharm执行python时,填写参数的方法
2018/10/29 Python
对json字符串与python字符串的不同之处详解
2018/12/19 Python
python实现转圈打印矩阵
2019/03/02 Python
python操作redis数据库的三种方法
2020/09/10 Python
法国发饰品牌:Alexandre De Paris
2018/12/04 全球购物
恶意软件的定义
2014/11/12 面试题
计算机专业应届毕业生自荐信
2013/09/26 职场文书
大学毕业生最详细的自我评价分享
2013/11/18 职场文书
成绩单公证书
2014/04/10 职场文书
领导干部“四风”问题批评与自我批评材料
2014/09/24 职场文书
2015年护士医德医风自我评价
2015/03/03 职场文书
生鲜超市—未来中国最具有潜力零售业态
2019/08/02 职场文书
JavaScript 中for/of,for/in 的详细介绍
2021/11/17 Javascript
Vue中Object.assign清空数据报错的解决方案
2022/03/03 Vue.js
Python&Matlab实现灰狼优化算法的示例代码
2022/03/21 Python