使用python读取txt文件的内容,并删除重复的行数方法


Posted in Python onApril 18, 2018

注意,本文代码是使用在txt文档上,同时txt文档中的内容每一行代表的是图片的名字。

#coding:utf-8 
import shutil 
readDir = "原文件绝对路经" 
writeDir = "写入文件的绝对路径" 
#txtDir = "/home/fuxueping/Desktop/1" 
lines_seen = set() 
outfile=open(writeDir,"w") 
f = open(readDir,"r") 
for line in f: 
  if line not in lines_seen: 
    outfile.write(line) 
    lines_seen.add(line) 
outfile.close() 
print "success"

最终结果在在写入文件内容中,没有重复内容。

以上这篇使用python读取txt文件的内容,并删除重复的行数方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
简明 Python 基础学习教程
Feb 08 Python
python中的代码编码格式转换问题
Jun 10 Python
Python实现将数据框数据写入mongodb及mysql数据库的方法
Apr 02 Python
python3使用QQ邮箱发送邮件
May 20 Python
tensorflow -gpu安装方法(不用自己装cuda,cdnn)
Jan 20 Python
pycharm 中mark directory as exclude的用法详解
Feb 14 Python
在django中使用post方法时,需要增加csrftoken的例子
Mar 13 Python
Python使用socketServer包搭建简易服务器过程详解
Jun 12 Python
python3 简单实现组合设计模式
Jul 02 Python
Python生成器传参数及返回值原理解析
Jul 22 Python
PyQt5 QDockWidget控件应用详解
Aug 12 Python
Python实现批量将文件复制到新的目录中再修改名称
Apr 12 Python
python对excel文档去重及求和的实例
Apr 18 #Python
Pandas之drop_duplicates:去除重复项方法
Apr 18 #Python
pandas 实现将重复表格去重,并重新转换为表格的方法
Apr 18 #Python
Python对多属性的重复数据去重实例
Apr 18 #Python
Python3实现的字典遍历操作详解
Apr 18 #Python
Python基于递归算法实现的汉诺塔与Fibonacci数列示例
Apr 18 #Python
python 删除列表里所有空格项的方法总结
Apr 18 #Python
You might like
php实现统计网站在线人数的方法
2015/05/12 PHP
php实现背景图上添加圆形logo图标的方法
2016/11/17 PHP
php file_get_contents取文件中数组元素的方法
2017/04/01 PHP
Laravel实现autoload方法详解
2017/05/07 PHP
php使用scandir()函数扫描指定目录下所有文件示例
2019/06/08 PHP
jscript之Read an Excel Spreadsheet
2007/06/13 Javascript
js右键菜单效果代码
2007/07/21 Javascript
关于javascript 回调函数中变量作用域的讨论
2009/09/11 Javascript
js 获取class的元素的方法 以及创建方法getElementsByClassName
2013/03/11 Javascript
Jquery.Form 异步提交表单的简单实例
2014/03/03 Javascript
JS应用正则表达式转换大小写示例
2014/09/18 Javascript
node.js [superAgent] 请求使用示例
2015/03/13 Javascript
jQuery实现调整表格单列顺序完整实例
2016/06/20 Javascript
AngularJS实现注册表单验证功能
2017/10/16 Javascript
vue 解决addRoutes动态添加路由后刷新失效问题
2018/07/02 Javascript
Vue实现底部侧边工具栏的实例代码
2018/09/03 Javascript
微信小程序关键字变色实现代码实例
2019/12/13 Javascript
[57:16]2014 DOTA2华西杯精英邀请赛 5 25 LGD VS VG第二场
2014/05/26 DOTA
Python编程之属性和方法实例详解
2015/05/19 Python
Linux下python制作名片示例
2018/07/20 Python
Python3随机漫步生成数据并绘制
2018/08/27 Python
Python实现 版本号对比功能的实例代码
2019/04/18 Python
Python中如何添加自定义模块
2020/06/09 Python
解决c++调用python中文乱码问题
2020/07/29 Python
英国礼品和生活方式品牌:Treat Republic
2020/11/21 全球购物
Eclipse面试题
2014/03/22 面试题
园林技术个人的自我评价
2014/01/08 职场文书
优秀求职信范文分享
2014/01/26 职场文书
大学计划书范文800字
2014/08/14 职场文书
环保项目建议书
2014/08/26 职场文书
实习班主任自我评价
2015/03/11 职场文书
2015年推广普通话演讲稿
2015/03/20 职场文书
导师工作推荐信
2015/03/27 职场文书
PHP中strval()函数实例用法
2021/06/07 PHP
Sleuth+logback 设置traceid 及自定义信息方式
2021/07/26 Java/Android
SpringBoot+Redis实现布隆过滤器的示例代码
2022/03/17 Java/Android