使用python读取txt文件的内容,并删除重复的行数方法


Posted in Python onApril 18, 2018

注意,本文代码是使用在txt文档上,同时txt文档中的内容每一行代表的是图片的名字。

#coding:utf-8 
import shutil 
readDir = "原文件绝对路经" 
writeDir = "写入文件的绝对路径" 
#txtDir = "/home/fuxueping/Desktop/1" 
lines_seen = set() 
outfile=open(writeDir,"w") 
f = open(readDir,"r") 
for line in f: 
  if line not in lines_seen: 
    outfile.write(line) 
    lines_seen.add(line) 
outfile.close() 
print "success"

最终结果在在写入文件内容中,没有重复内容。

以上这篇使用python读取txt文件的内容,并删除重复的行数方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python中非常实用的一些功能和函数分享
Feb 14 Python
Python中的字典与成员运算符初步探究
Oct 13 Python
使用pyecharts在jupyter notebook上绘图
Apr 23 Python
python WindowsError的错误代码详解
Jul 23 Python
简单谈谈python中的语句和语法
Aug 10 Python
Python cookbook(数据结构与算法)字典相关计算问题示例
Feb 18 Python
Django网络框架之HelloDjango项目创建教程
Jun 06 Python
PyQT实现菜单中的复制,全选和清空的功能的方法
Jun 17 Python
pyqt5 实现 下拉菜单 + 打开文件的示例代码
Jun 20 Python
利用matplotlib为图片上添加触发事件进行交互
Apr 23 Python
win7上tensorflow2.2.0安装成功 引用DLL load failed时找不到指定模块 tensorflow has no attribute xxx 解决方法
May 20 Python
Python中猜拳游戏与猜筛子游戏的实现方法
Sep 04 Python
python对excel文档去重及求和的实例
Apr 18 #Python
Pandas之drop_duplicates:去除重复项方法
Apr 18 #Python
pandas 实现将重复表格去重,并重新转换为表格的方法
Apr 18 #Python
Python对多属性的重复数据去重实例
Apr 18 #Python
Python3实现的字典遍历操作详解
Apr 18 #Python
Python基于递归算法实现的汉诺塔与Fibonacci数列示例
Apr 18 #Python
python 删除列表里所有空格项的方法总结
Apr 18 #Python
You might like
php 运行效率总结(提示程序速度)
2009/11/26 PHP
完美解决thinkphp验证码出错无法显示的方法
2014/12/09 PHP
PHP实现链式操作的核心思想
2015/06/23 PHP
php时间计算相关问题小结
2016/05/09 PHP
使用laravel和ajax实现整个页面无刷新的操作方法
2019/10/03 PHP
PhpSpreadsheet设置单元格常用操作汇总
2020/11/13 PHP
jquery trim() 功能源代码
2011/02/14 Javascript
一些常用的JavaScript函数(json)附详细说明
2011/05/25 Javascript
JavaScript实现防止网页被嵌入Frame框架的代码分享
2014/12/29 Javascript
javascript实现禁止鼠标滚轮事件
2015/07/24 Javascript
详解Wondows下Node.js使用MongoDB的环境配置
2016/03/01 Javascript
搞定immutable.js详细说明
2016/05/02 Javascript
jQuery实现的placeholder效果完整实例
2016/08/02 Javascript
工作中比较实用的JavaScript验证和数据处理的干货(经典)
2016/08/03 Javascript
只要1K 纯JS脚本送你一朵3D红色玫瑰
2016/08/09 Javascript
nodejs入门教程四:URL相关模块用法分析
2017/04/24 NodeJs
JS实现求数组起始项到终止项之和的方法【基于数组扩展函数】
2017/06/13 Javascript
详解基于Bootstrap+angular的一个豆瓣电影app
2017/06/26 Javascript
Angular中自定义Debounce Click指令防止重复点击
2017/07/26 Javascript
说说node中的可读流和可写流的区别
2018/06/01 Javascript
vue-cli中使用高德地图的方法示例
2019/03/28 Javascript
Python常用库推荐
2016/12/04 Python
Python与人工神经网络:使用神经网络识别手写图像介绍
2017/12/19 Python
python利用OpenCV2实现人脸检测
2020/04/16 Python
python读文件保存到字典,修改字典并写入新文件的实例
2018/04/23 Python
Python实现抓取HTML网页并以PDF文件形式保存的方法
2018/05/08 Python
PHP实现发送和接收JSON请求
2018/06/07 Python
Nginx+Uwsgi+Django 项目部署到服务器的思路详解
2020/05/08 Python
Django bulk_create()、update()与数据库事务的效率对比分析
2020/05/15 Python
python开发前景如何
2020/06/11 Python
python dir函数快速掌握用法技巧
2020/12/09 Python
3种方式实现瀑布流布局小结
2019/09/05 HTML / CSS
2014年财务部工作总结
2014/11/11 职场文书
2015年大学元旦晚会活动策划书
2014/12/09 职场文书
项目经理助理岗位职责
2015/04/13 职场文书
Redis过期数据是否会被立马删除
2022/07/23 Redis