python读取文本中数据并转化为DataFrame的实例


Posted in Python onApril 10, 2018

在技术问答中看到一个这样的问题,感觉相对比较常见,就单开一篇文章写下来。

从纯文本格式文件 “file_in”中读取数据,格式如下:

python读取文本中数据并转化为DataFrame的实例

需要输出成“file_out”,格式如下:

python读取文本中数据并转化为DataFrame的实例

数据的原格式是“类别:内容”,以空行“\n”为分条目,转换后变成一个条目一行,按照类别顺序依次写出内容。

建议读取后,使用pandas,把数据建立称DataFrame的表格。这样方便以后处理数据。但是原格式并不是通常的表格格式,所以要先做一些简单的处理。

#coding:utf8
import sys
from pandas import DataFrame  #DataFrame通常来装二维的表格
import pandas as pd      #pandas是流行的做数据分析的包
#建立字典,键和值都从文件里读出来。键是nam,age……,值是lili,jim……
dict_data={}
#打开文件
with open('file_in.txt','r')as df:
  #读每一行
  for line in df:
    #如果这行是换行符就跳过,这里用'\n'的长度来找空行
    if line.count('\n') == len(line):
      continue
    #对每行清除前后空格(如果有的话),然后用":"分割
    for kv in [line.strip().split(':')]:
      #按照键,把值写进去
      dict_data.setdefault(kv[0],[]).append(kv[1])
#print(dict_data)看看效果
#这是把键读出来成为一个列表
columnsname=list(dict_data.keys())
#建立一个DataFrame,列名即为键名,也就是nam,age……
frame = DataFrame(dict_data,columns=columnsname)
#把DataFrame输出到一个表,不要行名字和列名字
frame.to_csv('file_out0.txt',index=False,header=False)

以上这篇python读取文本中数据并转化为DataFrame的实例就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
从零学python系列之数据处理编程实例(二)
May 22 Python
Python实现随机选择元素功能
Sep 14 Python
Python使用flask框架操作sqlite3的两种方式
Jan 31 Python
Python+selenium 获取一组元素属性值的实例
Jun 22 Python
Python3爬取英雄联盟英雄皮肤大图实例代码
Nov 14 Python
解决sublime+python3无法输出中文的问题
Dec 12 Python
python实现爬山算法的思路详解
Apr 09 Python
selenium+python自动化测试环境搭建步骤
Jun 03 Python
python实现批量nii文件转换为png图像
Jul 18 Python
python 公共方法汇总解析
Sep 16 Python
python3+openCV 获取图片中文本区域的最小外接矩形实例
Jun 02 Python
selenium设置浏览器为headless无头模式(Chrome和Firefox)
Jan 08 Python
python实现百度语音识别api
Apr 10 #Python
Python Selenium Cookie 绕过验证码实现登录示例代码
Apr 10 #Python
浅谈pandas中Dataframe的查询方法([], loc, iloc, at, iat, ix)
Apr 10 #Python
python pandas dataframe 行列选择,切片操作方法
Apr 10 #Python
python3下实现搜狗AI API的代码示例
Apr 10 #Python
Python基于pycrypto实现的AES加密和解密算法示例
Apr 10 #Python
浅谈Pandas中map, applymap and apply的区别
Apr 10 #Python
You might like
php学习笔记 类的声明与对象实例化
2011/06/13 PHP
php fsockopen伪造post与get方法的详解
2013/06/14 PHP
深入理解PHP中的global
2014/08/19 PHP
PHP实现163邮箱自动发送邮件
2016/03/29 PHP
PHP打印输出函数汇总
2016/08/28 PHP
Laravel框架创建路由的方法详解
2019/09/04 PHP
thinkPHP+LayUI 流加载实现功能
2019/09/27 PHP
JS维吉尼亚密码算法实现代码
2010/11/09 Javascript
用原生JavaScript实现jQuery的$.getJSON的解决方法
2013/05/03 Javascript
js中自定义方法实现停留几秒sleep
2014/07/11 Javascript
javascript实现点击商品列表checkbox实时统计金额的方法
2015/05/15 Javascript
纯javascript制作日历控件
2015/07/17 Javascript
Javascript实现倒计时(防页面刷新)实例
2016/12/13 Javascript
从理论角度讨论JavaScript闭包
2019/04/03 Javascript
layui table 复选框跳页后再回来保持原来选中的状态示例
2019/10/26 Javascript
javascript中的offsetWidth、clientWidth、innerWidth及相关属性方法
2020/05/14 Javascript
JavaScript枚举选择jquery插件代码实例
2020/11/17 jQuery
Python实现批量修改文件名实例
2015/07/08 Python
详解python分布式进程
2018/10/08 Python
Python字符串、列表、元组、字典、集合的补充实例详解
2019/12/20 Python
keras绘制acc和loss曲线图实例
2020/06/15 Python
Flask-SocketIO服务端安装及使用代码示例
2020/11/26 Python
Pandas之缺失数据的实现
2021/01/06 Python
纯CSS3代码实现switch滑动开关按钮效果
2016/08/30 HTML / CSS
让IE支持CSS3的不完全兼容方案
2014/09/19 HTML / CSS
expedia比利时:预订航班+酒店并省钱
2018/07/13 全球购物
圣诞树世界:Christmas Tree World
2019/12/10 全球购物
如何在发生故障的节点上重新安装 SQL Server
2013/03/14 面试题
小学生美德少年事迹
2014/02/02 职场文书
毕业论文评语大全
2014/04/29 职场文书
在职党员进社区活动总结
2014/07/05 职场文书
同志主要表现材料
2014/08/21 职场文书
聋哑人盗窃罪辩护词
2015/05/21 职场文书
windows安装python超详细图文教程
2021/05/21 Python
python单元测试之pytest的使用
2021/06/07 Python
Python测试框架pytest高阶用法全面详解
2022/06/01 Python