使用python读取txt文件的内容,并删除重复的行数方法


Posted in Python onApril 18, 2018

注意,本文代码是使用在txt文档上,同时txt文档中的内容每一行代表的是图片的名字。

#coding:utf-8 
import shutil 
readDir = "原文件绝对路经" 
writeDir = "写入文件的绝对路径" 
#txtDir = "/home/fuxueping/Desktop/1" 
lines_seen = set() 
outfile=open(writeDir,"w") 
f = open(readDir,"r") 
for line in f: 
  if line not in lines_seen: 
    outfile.write(line) 
    lines_seen.add(line) 
outfile.close() 
print "success"

最终结果在在写入文件内容中,没有重复内容。

以上这篇使用python读取txt文件的内容,并删除重复的行数方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
使用Python编写提取日志中的中文的脚本的方法
Apr 30 Python
Python实现删除当前目录下除当前脚本以外的文件和文件夹实例
Jul 27 Python
Python selenium文件上传方法汇总
Nov 19 Python
Python中functools模块函数解析
Mar 12 Python
python 限制函数调用次数的实例讲解
Apr 21 Python
pandas DataFrame实现几列数据合并成为新的一列方法
Jun 08 Python
python多个模块py文件的数据共享实例
Jan 11 Python
python操作kafka实践的示例代码
Jun 19 Python
提升Python效率之使用循环机制代替递归函数
Jul 23 Python
python实现连连看游戏
Feb 14 Python
解决Jupyter因卸载重装导致的问题修复
Apr 10 Python
基于python判断字符串括号是否闭合{}[]()
Sep 21 Python
python对excel文档去重及求和的实例
Apr 18 #Python
Pandas之drop_duplicates:去除重复项方法
Apr 18 #Python
pandas 实现将重复表格去重,并重新转换为表格的方法
Apr 18 #Python
Python对多属性的重复数据去重实例
Apr 18 #Python
Python3实现的字典遍历操作详解
Apr 18 #Python
Python基于递归算法实现的汉诺塔与Fibonacci数列示例
Apr 18 #Python
python 删除列表里所有空格项的方法总结
Apr 18 #Python
You might like
利用谷歌 Translate API制作自己的翻译脚本
2014/06/04 PHP
html静态页面调用php文件的方法
2014/11/13 PHP
Zend Framework框架教程之Zend_Db_Table_Rowset用法实例分析
2016/03/21 PHP
页面中js执行顺序
2009/11/09 Javascript
js对象的构造和继承实现代码
2010/12/05 Javascript
JS对外部文件的加载及对IFRMAME的加载的实现,当加载完成后,指定指向方法(方法回调)
2011/07/04 Javascript
jquery使用ColorBox弹出图片组浏览层实例演示
2013/03/14 Javascript
js验证是否为数字的总结
2013/04/14 Javascript
浅析showModalDialog数据缓存问题(用禁止浏览器缓存解决)
2013/07/09 Javascript
jQuery插件imgPreviewQs实现上传图片预览
2016/01/15 Javascript
jQuery控制li上下循环滚动插件用法实例(附demo源码下载)
2016/05/28 Javascript
详解动画插件wow.js的使用方法
2017/09/13 Javascript
使用ng-packagr打包Angular的方法示例
2018/09/21 Javascript
nodejs微信开发之授权登录+获取用户信息
2019/03/17 NodeJs
Vue实战教程之仿肯德基宅急送App
2019/07/19 Javascript
vue集成chart.js的实现方法
2019/08/20 Javascript
JavaScript面试中常考的字符串操作方法大全(包含ES6)
2020/05/10 Javascript
[02:49]DAC2018决赛日TOP5 LGD开启黑暗之门绝杀VP
2018/04/08 DOTA
Django框架中的对象列表视图使用示例
2015/07/21 Python
举例讲解Python中的迭代器、生成器与列表解析用法
2016/03/20 Python
Python多维/嵌套字典数据无限遍历的实现
2016/11/04 Python
机器学习实战之knn算法pandas
2019/06/22 Python
使用SQLAlchemy操作数据库表过程解析
2020/06/10 Python
详解pyinstaller生成exe的闪退问题解决方案
2020/06/19 Python
html5拖曳操作 HTML5实现网页元素的拖放操作
2013/01/02 HTML / CSS
斐乐美国官方网站:FILA美国
2019/03/01 全球购物
摩飞电器俄罗斯官方网站:Morphy Richards俄罗斯
2020/07/30 全球购物
航空大学应届生求职信
2013/11/10 职场文书
学习两会精神心得范文
2014/03/17 职场文书
学校安全防火方案
2014/06/07 职场文书
民主评议党员自我评议范文2014
2014/09/26 职场文书
2015年青年志愿者协会工作总结
2015/04/27 职场文书
幼儿园教师个人工作总结2015
2015/05/12 职场文书
会议主持词结束语
2015/07/03 职场文书
纯CSS实现一个简单步骤条的示例代码
2022/07/15 HTML / CSS
python manim实现排序算法动画示例
2022/08/14 Python