使用python读取txt文件的内容,并删除重复的行数方法


Posted in Python onApril 18, 2018

注意,本文代码是使用在txt文档上,同时txt文档中的内容每一行代表的是图片的名字。

#coding:utf-8 
import shutil 
readDir = "原文件绝对路经" 
writeDir = "写入文件的绝对路径" 
#txtDir = "/home/fuxueping/Desktop/1" 
lines_seen = set() 
outfile=open(writeDir,"w") 
f = open(readDir,"r") 
for line in f: 
  if line not in lines_seen: 
    outfile.write(line) 
    lines_seen.add(line) 
outfile.close() 
print "success"

最终结果在在写入文件内容中,没有重复内容。

以上这篇使用python读取txt文件的内容,并删除重复的行数方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python简单实现enum功能的方法
Apr 25 Python
Python 操作MySQL详解及实例
Apr 30 Python
Python之多线程爬虫抓取网页图片的示例代码
Jan 10 Python
python实现数据写入excel表格
Mar 25 Python
Python使用OpenCV进行标定
May 08 Python
pandas 数据实现行间计算的方法
Jun 08 Python
python 实现求解字符串集的最长公共前缀方法
Jul 20 Python
解决python中画图时x,y轴名称出现中文乱码的问题
Jan 29 Python
Django框架模板文件使用及模板文件加载顺序分析
May 23 Python
postman模拟访问具有Session的post请求方法
Jul 15 Python
Python配置文件处理的方法教程
Aug 29 Python
Python 多线程处理任务实例
Nov 07 Python
python对excel文档去重及求和的实例
Apr 18 #Python
Pandas之drop_duplicates:去除重复项方法
Apr 18 #Python
pandas 实现将重复表格去重,并重新转换为表格的方法
Apr 18 #Python
Python对多属性的重复数据去重实例
Apr 18 #Python
Python3实现的字典遍历操作详解
Apr 18 #Python
Python基于递归算法实现的汉诺塔与Fibonacci数列示例
Apr 18 #Python
python 删除列表里所有空格项的方法总结
Apr 18 #Python
You might like
php 日期时间处理函数小结
2009/12/18 PHP
ThinkPHP关于session的操作方法汇总
2014/07/18 PHP
Yii2使用dropdownlist实现地区三级联动功能的方法
2016/07/18 PHP
thinkphp框架表单数组实现图片批量上传功能示例
2020/04/04 PHP
常用js脚本
2006/12/03 Javascript
javascript错误的认识不用关心内存管理
2012/12/15 Javascript
Js中获取frames中的元素示例代码
2013/07/30 Javascript
html向js方法传递参数具体实现
2013/08/08 Javascript
表单提交前触发函数返回true表单才会提交
2014/03/11 Javascript
JS动态日期时间的获取方法
2015/09/28 Javascript
深入理解关于javascript中apply()和call()方法的区别
2016/04/12 Javascript
vue.js实现请求数据的方法示例
2017/02/07 Javascript
微信小程序排坑指南详解
2018/05/23 Javascript
详解vue项目中实现图片裁剪功能
2019/06/07 Javascript
nodejs使用node-xlsx生成excel的方法示例
2019/08/22 NodeJs
layui使用form表单实现post请求页面跳转的方法
2019/09/14 Javascript
JS数组属性去重并校验重复数据
2020/01/10 Javascript
python益智游戏计算汉诺塔问题示例
2014/03/05 Python
快速入手Python字符编码
2016/08/03 Python
python批量赋值操作实例
2018/10/22 Python
详解python中的线程与线程池
2019/05/10 Python
python解析命令行参数的三种方法详解
2019/11/29 Python
使用matlab 判断两个矩阵是否相等的实例
2020/05/11 Python
django自带的权限管理Permission用法说明
2020/05/13 Python
matplotlib bar()实现百分比堆积柱状图
2021/02/24 Python
CSS3的常见transformation图形变化用法小结
2016/05/13 HTML / CSS
HTML5 script元素async、defer异步加载使用介绍
2013/08/23 HTML / CSS
车间操作工岗位职责
2013/12/19 职场文书
会计电算化大学生职业规划书
2014/02/05 职场文书
邹越感恩父母演讲稿
2014/08/28 职场文书
关于晚自习早退的检讨书
2014/09/13 职场文书
夫妻分居协议书范本
2014/11/28 职场文书
心理学培训心得体会
2016/01/22 职场文书
导游词之临安白水涧
2019/11/05 职场文书
抖音短视频(douyin)去水印工具的实现代码
2021/03/30 Javascript
Python内置类型集合set和frozenset的使用详解
2022/04/26 Python