python实现文本文件合并


Posted in Python onDecember 29, 2015

python合并文本文件示例代码。

python实现两个文本合并

employee文件中记录了工号和姓名

cat employee.txt:

100 Jason Smith
200 John Doe
300 Sanjay Gupta
400 Ashok Sharma

bonus文件中记录工号和工资

cat bonus.txt:

100 $5,000
200 $500
300 $3,000
400 $1,250

要求把两个文件合并并输出如下, 处理结果:

400 ashok sharma $1,250

100 jason smith $5,000
200 john doe $500
300 sanjay gupta $3,000

这个应该是要求用shell来写的,但我的shell功底不怎么样,就用python来实现了
注意,按题目的意思,在输出文件中还需要按照姓名首字母来排序的

#! /usr/bin/env python
 
#coding=utf-8
fp01=open("bonus.txt","r")
a=[]
for line01 in fp01:
a.append(line01)
fp02=open("employee.txt","r")
fc02=sorted(fp02,key=lambda x:x.split()[1])
for line02 in fc02:
i=0
while line02.split()[0]!=a[i].split()[0]:
i+=1
print "%s %s %s %s" % (line02.split()[0],line02.split()[1],line02.split()[2],a[i].split()[1])
fp01.close()
fp02.close()

我们再来看一段同样功能的 代码

# coding gbk 
# 
# author: GreatGhoul 
# email : greatghoul@gmail.com 
# blog : http://greatghoul.javaeye.com 
  
import sys,os,msvcrt 
  
def join(in_filenames, out_filename): 
  out_file = open(out_filename, 'w+') 
    
  err_files = [] 
  for file in in_filenames: 
    try: 
      in_file = open(file, 'r') 
      out_file.write(in_file.read()) 
      out_file.write('\n\n') 
      in_file.close() 
    except IOError: 
      print 'error joining', file 
      err_files.append(file) 
  out_file.close() 
  print 'joining completed. %d file(s) missed.' % len(err_files) 
  print 'output file:', out_filename 
  if len(err_files) > 0: 
    print 'missed files:' 
    print '--------------------------------' 
    for file in err_files: 
      print file 
    print '--------------------------------' 
  
if __name__ == '__main__': 
  print 'scanning...' 
  in_filenames = [] 
  file_count = 0 
  for file in os.listdir(sys.path[0]): 
    if file.lower().endswith('[all].txt'): 
      os.remove(file) 
    elif file.lower().endswith('.txt'): 
      in_filenames.append(file) 
      file_count = file_count + 1 
  if len(in_filenames) > 0: 
    print '--------------------------------' 
    print '\n'.join(in_filenames) 
    print '--------------------------------' 
    print '%d part(s) in total.' % file_count 
    book_name = raw_input('enter the book name: ') 
    print 'joining...' 
    join(in_filenames, book_name + '[ALL].TXT') 
  else: 
    print 'nothing found.' 
  msvcrt.getch()

最后我们再来看一个小编遇到的情况:

今天汇编的时候在阿甘的博客里面看到了一部小说《疯狂的程序员》,于是网上搜了下准备放到手机里闲时看看,无奈下载后发现是分章节的txt文本,一共有87个文件,考虑到阅读起来不是很方便,于是想找个现成的工具合并txt文本。

结果尝试了几个工具后觉得合并效果都不给力啊,于是打算自己动手。其实cmd的命令"type *.txt >> crazy-programmer.txt"还是很有效果的,然而合并后的txt文件却十分庞大,所以我还是自己写了一个脚本完成了合并。

说明:由于我下载的87个txt文件的字符编码格式都不统一,所以我用chardet模块判断字符编码类型后再用codecs模块的codecs.open功能解决了编码问题。如果直接用file的open打开txt文件的话,在UCS-2 Little Endian的编码情况下,file.read()遇到中文的冒号(即“:”)后会无法读取冒号以后的内容,所以需要用codecs.open(path,'r',encoding)来解决。

如果还有问题可以留言,代码如下:

#!coding: cp936 
import codecs, chardet 
 
def fileopen(filename): 
  f = open(filename, 'r') 
  s = f.read() 
  if(chardet.detect(s)['encoding'] == 'UTF-16LE'): 
    f.close() 
    f = codecs.open(filename, 'r', 'utf-16-le')     
    data = f.read().encode('gb2312', 'ignore') 
    f.close() 
  elif(chardet.detect(s)['encoding'] == 'GB2312'): 
    data = s 
    f.close() 
  return data 
 
i = 1 
while i <=87: 
  if(i < 10): 
    filename = '0'+str(i)+'.txt' 
  else: 
    filename = str(i)+'.txt' 
  text = fileopen(filename) 
  file('crazy-p.txt', 'a+').write(text) 
  i = i+1

其中,chardet模块需要下载安装,脚本还可以改进以适应更多种情况,我就懒了。

Python 相关文章推荐
Python实现的百度站长自动URL提交小工具
Jun 27 Python
python逆向入门教程
Jan 15 Python
学习Python3 Dlib19.7进行人脸面部识别
Jan 24 Python
python实现多线程行情抓取工具的方法
Feb 28 Python
PyQt5实现让QScrollArea支持鼠标拖动的操作方法
Jun 19 Python
树莓派+摄像头实现对移动物体的检测
Jun 22 Python
解决tensorflow读取本地MNITS_data失败的原因
Jun 22 Python
python判断变量是否为列表的方法
Sep 17 Python
Jupyter Notebook 远程访问配置详解
Jan 11 Python
pycharm 配置svn的图文教程(手把手教你)
Jan 15 Python
python神经网络编程之手写数字识别
May 08 Python
浅析python中特殊文件和特殊函数
Feb 24 Python
Python验证码识别处理实例
Dec 28 #Python
在Windows系统上搭建Nginx+Python+MySQL环境的教程
Dec 25 #Python
Windows系统下使用flup搭建Nginx和Python环境的方法
Dec 25 #Python
在Linux系统上通过uWSGI配置Nginx+Python环境的教程
Dec 25 #Python
Linux系统上Nginx+Python的web.py与Django框架环境
Dec 25 #Python
Linux下将Python的Django项目部署到Apache服务器
Dec 24 #Python
在Linux系统上部署Apache+Python+Django+MySQL环境
Dec 24 #Python
You might like
PHP语言中global和$GLOBALS[]的分析 之二
2012/02/02 PHP
php 模拟get_headers函数的代码示例
2013/04/27 PHP
ThinkPHP实现支付宝接口功能实例
2014/12/02 PHP
php session的应用详细介绍
2017/03/22 PHP
ThinkPHP5.1的权限控制怎么写?分享一个AUTH权限控制
2021/03/09 PHP
javascript下有关dom以及xml节点访问兼容问题
2007/11/26 Javascript
Ajax,UTF-8还是GB2312 eval 还是execScript
2008/11/13 Javascript
用jquery与css打造个性化的单选框和复选框
2010/10/20 Javascript
精选的10款用于构建良好易用性网站的jQuery插件
2011/01/23 Javascript
jquery中dom操作和事件的实例学习 下拉框应用
2011/12/01 Javascript
JavaScript地图拖动功能SpryMap的简单实现
2013/07/17 Javascript
JQuery与JS里submit()的区别示例介绍
2014/02/17 Javascript
jQuery实现的登录浮动框效果代码
2015/09/26 Javascript
Bootstrap Modal遮罩弹出层代码分享
2016/11/21 Javascript
vue基础之事件v-onclick=&quot;函数&quot;用法示例
2019/03/11 Javascript
Vue中实现权限控制的方法示例
2019/06/07 Javascript
Windows安装Python、pip、easy_install的方法
2017/03/05 Python
关于Python中浮点数精度处理的技巧总结
2017/08/10 Python
python实现简易云音乐播放器
2018/01/04 Python
python实现远程通过网络邮件控制计算机重启或关机
2018/02/22 Python
python selenium自动上传有赞单号的操作方法
2018/07/05 Python
python如何获取列表中每个元素的下标位置
2019/07/01 Python
简单了解python的break、continue、pass
2019/07/08 Python
Django为窗体加上防机器人的验证码功能过程解析
2019/08/14 Python
Python嵌套函数,作用域与偏函数用法实例分析
2019/12/26 Python
pytorch 数据处理:定义自己的数据集合实例
2019/12/31 Python
结束运行python的方法
2020/06/16 Python
python 图像插值 最近邻、双线性、双三次实例
2020/07/05 Python
python解包用法详解
2021/02/17 Python
英国家庭家具、照明和花园家具购物网站:Furniture123
2018/12/31 全球购物
自荐信格式写作方法有哪些呢
2013/11/20 职场文书
母亲追悼会答谢词
2014/01/27 职场文书
2014教师党员自我评议(5篇)
2014/09/20 职场文书
如何写好活动总结
2019/06/21 职场文书
导游词之南京夫子庙
2019/12/09 职场文书
MySQL表字段数量限制及行大小限制详情
2022/07/23 MySQL