使用python读取txt文件的内容,并删除重复的行数方法


Posted in Python onApril 18, 2018

注意,本文代码是使用在txt文档上,同时txt文档中的内容每一行代表的是图片的名字。

#coding:utf-8 
import shutil 
readDir = "原文件绝对路经" 
writeDir = "写入文件的绝对路径" 
#txtDir = "/home/fuxueping/Desktop/1" 
lines_seen = set() 
outfile=open(writeDir,"w") 
f = open(readDir,"r") 
for line in f: 
  if line not in lines_seen: 
    outfile.write(line) 
    lines_seen.add(line) 
outfile.close() 
print "success"

最终结果在在写入文件内容中,没有重复内容。

以上这篇使用python读取txt文件的内容,并删除重复的行数方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
go和python调用其它程序并得到程序输出
Feb 10 Python
Python中的特殊语法:filter、map、reduce、lambda介绍
Apr 14 Python
编写Python的web框架中的Model的教程
Apr 29 Python
Python用Bottle轻量级框架进行Web开发
Jun 08 Python
Python实现的插入排序算法原理与用法实例分析
Nov 22 Python
python 哈希表实现简单python字典代码实例
Sep 27 Python
python2.7使用scapy发送syn实例
May 05 Python
tensorflow模型的save与restore,及checkpoint中读取变量方式
May 26 Python
基于python计算滚动方差(标准差)talib和pd.rolling函数差异详解
Jun 08 Python
Python如何使用ElementTree解析xml
Oct 12 Python
python神经网络ResNet50模型
May 06 Python
python通过新建环境安装tfx的问题
May 20 Python
python对excel文档去重及求和的实例
Apr 18 #Python
Pandas之drop_duplicates:去除重复项方法
Apr 18 #Python
pandas 实现将重复表格去重,并重新转换为表格的方法
Apr 18 #Python
Python对多属性的重复数据去重实例
Apr 18 #Python
Python3实现的字典遍历操作详解
Apr 18 #Python
Python基于递归算法实现的汉诺塔与Fibonacci数列示例
Apr 18 #Python
python 删除列表里所有空格项的方法总结
Apr 18 #Python
You might like
提升PHP执行速度全攻略(上)
2006/10/09 PHP
关于php程序报date()警告的处理(date_default_timezone_set)
2013/10/22 PHP
CI框架中cookie的操作方法分析
2014/12/12 PHP
PHP7.1新功能之Nullable Type用法分析
2016/09/26 PHP
php基于PDO实现功能强大的MYSQL封装类实例
2017/02/27 PHP
定位地理位置PHP判断员工打卡签到经纬度是否在打卡之内
2019/05/23 PHP
js控制框架刷新
2008/08/01 Javascript
javascript 页面只自动刷新一次
2009/07/10 Javascript
JavaScript动态创建div属性和样式示例代码
2013/10/09 Javascript
jQuery中hasClass()方法用法实例
2015/01/06 Javascript
深入探讨JavaScript String对象
2015/03/09 Javascript
Javascript刷新窗口方法小结
2015/10/21 Javascript
javascript类型系统 Array对象学习笔记
2016/01/09 Javascript
简单的js计算器实现
2016/10/26 Javascript
简单实现jQuery级联菜单
2017/01/09 Javascript
JS时间控制实现动态效果的实例讲解
2017/07/31 Javascript
详解Angular2表单-模板驱动的表单(Template-Driven Forms)
2017/08/04 Javascript
在webstorm开发微信小程序之使用阿里自定义字体图标的方法
2018/11/15 Javascript
微信小程序获取用户绑定手机号方法示例
2019/07/21 Javascript
Vue的双向数据绑定实现原理解析
2020/02/17 Javascript
NodeJS配置CORS实现过程详解
2020/12/02 NodeJs
vue+openlayers绘制省市边界线
2020/12/24 Vue.js
[08:02]DOTA2牵红线 zhou神抱得美人归
2014/03/22 DOTA
使用python在校内发人人网状态(人人网看状态)
2014/02/19 Python
Python max内置函数详细介绍
2016/11/17 Python
Python字符串处理的8招秘籍(小结)
2019/08/13 Python
使用Python串口实时显示数据并绘图的例子
2019/12/26 Python
python实现快递价格查询系统
2020/03/03 Python
win10安装python3.6的常见问题
2020/07/01 Python
C语言开发工程师测试题
2016/12/20 面试题
thinkphp5 redis缓存新增方法实例讲解
2021/03/24 PHP
自我评价格式
2014/01/06 职场文书
技术总监管理岗位职责
2014/03/09 职场文书
感情真挚的毕业生求职信
2014/07/19 职场文书
学校安全管理责任书
2014/07/23 职场文书
医院党员公开承诺书
2014/08/30 职场文书