使用python读取txt文件的内容,并删除重复的行数方法


Posted in Python onApril 18, 2018

注意,本文代码是使用在txt文档上,同时txt文档中的内容每一行代表的是图片的名字。

#coding:utf-8 
import shutil 
readDir = "原文件绝对路经" 
writeDir = "写入文件的绝对路径" 
#txtDir = "/home/fuxueping/Desktop/1" 
lines_seen = set() 
outfile=open(writeDir,"w") 
f = open(readDir,"r") 
for line in f: 
  if line not in lines_seen: 
    outfile.write(line) 
    lines_seen.add(line) 
outfile.close() 
print "success"

最终结果在在写入文件内容中,没有重复内容。

以上这篇使用python读取txt文件的内容,并删除重复的行数方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python过滤函数filter()使用自定义函数过滤序列实例
Aug 26 Python
Python中的map()函数和reduce()函数的用法
Apr 27 Python
浅谈pyhton学习中出现的各种问题(新手必看)
May 17 Python
利用Pycharm断点调试Python程序的方法
Nov 29 Python
Python多线程处理实例详解【单进程/多进程】
Jan 30 Python
Django框架实现的分页demo示例
May 25 Python
PyQt 实现使窗口中的元素跟随窗口大小的变化而变化
Jun 18 Python
python+jinja2实现接口数据批量生成工具
Aug 28 Python
python Matplotlib数据可视化(1):简单入门
Sep 30 Python
Python识别验证码的实现示例
Sep 30 Python
python uuid生成唯一id或str的最简单案例
Jan 13 Python
python 将Excel转Word的示例
Mar 02 Python
python对excel文档去重及求和的实例
Apr 18 #Python
Pandas之drop_duplicates:去除重复项方法
Apr 18 #Python
pandas 实现将重复表格去重,并重新转换为表格的方法
Apr 18 #Python
Python对多属性的重复数据去重实例
Apr 18 #Python
Python3实现的字典遍历操作详解
Apr 18 #Python
Python基于递归算法实现的汉诺塔与Fibonacci数列示例
Apr 18 #Python
python 删除列表里所有空格项的方法总结
Apr 18 #Python
You might like
PHP分页显示的方法分析【附PHP通用分页类】
2018/05/10 PHP
PHP自定义函数实现assign()数组分配到模板及extract()变量分配到模板功能示例
2018/05/23 PHP
ThinkPHP5框架缓存查询操作分析
2018/05/30 PHP
TP5(thinkPHP5)框架基于ajax与后台数据交互操作简单示例
2018/09/03 PHP
alixixi runcode.asp的代码不错的应用
2007/08/08 Javascript
类似GMAIL的Ajax信息反馈显示
2010/02/16 Javascript
初窥JQuery(二)事件机制(2)
2010/12/06 Javascript
js下通过prototype扩展实现indexOf的代码
2010/12/08 Javascript
jWiard 基于JQuery的强大的向导控件介绍
2011/10/28 Javascript
点击弹出层外区域关闭弹出层jquery特效示例
2013/08/25 Javascript
JavaScript+CSS实现仿天猫侧边网页菜单效果
2015/08/25 Javascript
jQuery实现Meizu魅族官方网站的导航菜单效果
2015/09/14 Javascript
AngularJS入门教程之双向绑定详解
2016/08/18 Javascript
html+javascript+bootstrap实现层级多选框全层全选和多选功能
2017/03/09 Javascript
JS+HTML5实现图片在线预览功能
2017/07/22 Javascript
mongodb初始化并使用node.js实现mongodb操作封装方法
2019/04/02 Javascript
js实现图片跟随鼠标移动效果
2019/10/16 Javascript
TypeScript之调用栈的实现
2019/12/31 Javascript
[02:54]辉夜杯主赛事第二日败者组 iG.V赛后采访
2015/12/26 DOTA
python将多个文本文件合并为一个文本的代码(便于搜索)
2011/03/13 Python
Python version 2.7 required, which was not found in the registry
2014/08/26 Python
python使用pil生成缩略图的方法
2015/03/26 Python
Python学习入门之区块链详解
2017/07/25 Python
sublime python3 输入换行不结束的方法
2018/04/19 Python
flask-restful使用总结
2018/12/04 Python
python栈的基本定义与使用方法示例【初始化、赋值、入栈、出栈等】
2019/10/24 Python
python socket 聊天室实例代码详解
2019/11/14 Python
python numpy数组复制使用实例解析
2020/01/10 Python
Python3 + Appium + 安卓模拟器实现APP自动化测试并生成测试报告
2021/01/27 Python
Html5实现如何在两个div元素之间拖放图像
2013/03/29 HTML / CSS
英国家庭家具、照明和花园家具购物网站:Furniture123
2018/12/31 全球购物
孝老爱亲模范事迹
2014/01/24 职场文书
高等教育学专业自荐书
2014/06/17 职场文书
贪污检举信范文
2015/03/02 职场文书
海上钢琴师的观后感
2015/06/11 职场文书
金榜题名主持词
2015/07/02 职场文书