使用python读取txt文件的内容,并删除重复的行数方法


Posted in Python onApril 18, 2018

注意,本文代码是使用在txt文档上,同时txt文档中的内容每一行代表的是图片的名字。

#coding:utf-8 
import shutil 
readDir = "原文件绝对路经" 
writeDir = "写入文件的绝对路径" 
#txtDir = "/home/fuxueping/Desktop/1" 
lines_seen = set() 
outfile=open(writeDir,"w") 
f = open(readDir,"r") 
for line in f: 
  if line not in lines_seen: 
    outfile.write(line) 
    lines_seen.add(line) 
outfile.close() 
print "success"

最终结果在在写入文件内容中,没有重复内容。

以上这篇使用python读取txt文件的内容,并删除重复的行数方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python读取环境变量的方法和自定义类分享
Nov 22 Python
python抽象基类用法实例分析
Jun 04 Python
Python使用SocketServer模块编写基本服务器程序的教程
Jul 12 Python
一个基于flask的web应用诞生 flask和mysql相连(4)
Apr 11 Python
解决PyCharm同目录下导入模块会报错的问题
Oct 13 Python
在PyCharm中批量查找及替换的方法
Jan 20 Python
dataframe 按条件替换某一列中的值方法
Jan 29 Python
通过selenium抓取某东的TT购买记录并分析趋势过程解析
Aug 15 Python
python使用协程实现并发操作的方法详解
Dec 27 Python
python实例化对象的具体方法
Jun 17 Python
如何在python中实现线性回归
Aug 10 Python
Python confluent kafka客户端配置kerberos认证流程详解
Oct 12 Python
python对excel文档去重及求和的实例
Apr 18 #Python
Pandas之drop_duplicates:去除重复项方法
Apr 18 #Python
pandas 实现将重复表格去重,并重新转换为表格的方法
Apr 18 #Python
Python对多属性的重复数据去重实例
Apr 18 #Python
Python3实现的字典遍历操作详解
Apr 18 #Python
Python基于递归算法实现的汉诺塔与Fibonacci数列示例
Apr 18 #Python
python 删除列表里所有空格项的方法总结
Apr 18 #Python
You might like
PHP中error_reporting()函数的用法(修改PHP屏蔽错误)
2011/07/01 PHP
php遍历文件夹下的所有文件和子文件夹示例
2014/03/20 PHP
php设计模式之简单工厂模式详解
2014/09/04 PHP
6个超实用的PHP代码片段
2015/08/10 PHP
Javascript 中介者模式实例
2009/12/16 Javascript
基于JavaScript实现继承机制之原型链(prototype chaining)的详解
2013/05/07 Javascript
iframe的父子窗口之间的对象相互调用基本用法
2013/09/03 Javascript
JS中typeof与instanceof之间的区别总结
2013/11/14 Javascript
判断window.onload是否多次使用的方法
2014/09/21 Javascript
解析如何利用iframe标签以及js制作时钟
2016/12/08 Javascript
JS实现鼠标移上去显示图片或微信二维码
2016/12/14 Javascript
Javascript基础回顾之(三) js面向对象
2017/01/31 Javascript
vue中手机号,邮箱正则验证以及60s发送验证码的实例
2018/03/16 Javascript
Vue Echarts实现可视化世界地图代码实例
2019/05/07 Javascript
微信公众号获取用户地理位置并列出附近的门店的示例代码
2019/07/25 Javascript
微信sdk实现禁止微信分享(使用原生php实现)
2019/11/15 Javascript
python实现的jpg格式图片修复代码
2015/04/21 Python
python在linux系统下获取系统内存使用情况的方法
2015/05/11 Python
Python多进程库multiprocessing中进程池Pool类的使用详解
2017/11/24 Python
python 获取指定文件夹下所有文件名称并写入列表的实例
2018/04/23 Python
Python分割指定页数的pdf文件方法
2018/10/26 Python
pandas筛选某列出现编码错误的解决方法
2018/11/07 Python
python3实现指定目录下文件sha256及文件大小统计
2019/02/25 Python
使用Python制作一个打字训练小工具
2019/10/01 Python
django 实现后台从富文本提取纯文本
2020/07/02 Python
Python面向对象特殊属性及方法解析
2020/09/16 Python
CSS3实现的闪烁跳跃进度条示例(附源码)
2013/08/19 HTML / CSS
利用css3-animation实现逐帧动画效果
2016/03/10 HTML / CSS
全球知名旅游社区法国站点:TripAdvisor法国
2016/08/03 全球购物
在阿尔卑斯山或希腊度过快乐假期:Alpine Elements
2019/12/28 全球购物
类的核心特性有哪些
2014/01/01 面试题
农药学硕士毕业生自荐信
2013/09/25 职场文书
高中生自我评语大全
2014/01/19 职场文书
2014年秋季开学典礼致辞
2014/08/02 职场文书
中学生社区服务活动报告
2015/02/05 职场文书
本科毕业论文致谢怎么写
2015/05/14 职场文书