Python过滤txt文件内重复内容的方法


Posted in Python onOctober 21, 2018

Python过滤txt文件内重复内容,并将过滤后的内容保存到新的txt中

示例如下

原文件

Python过滤txt文件内重复内容的方法

处理之后的文件

Python过滤txt文件内重复内容的方法

直接上代码

# -*-coding:utf-8 -*-
f = open("1.txt", "rb")
n = f.read()
f.close()
m = n.split("\r\n")
print "m=",m
print m[1]
m1 = []
for i in xrange(len(m)):
 if not m[i] in m1:
  m1.append(m[i])
print "m1=", m1
filename = open("1.0.txt", "wb")
for i in xrange(len(m1)):
 filename.write(m1[i]+"\n")

可看到结果

Python过滤txt文件内重复内容的方法

以上这篇Python过滤txt文件内重复内容的方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python通过urllib2爬网页上种子下载示例
Feb 24 Python
python和shell实现的校验IP地址合法性脚本分享
Oct 23 Python
Python提取Linux内核源代码的目录结构实现方法
Jun 24 Python
Windows和Linux下Python输出彩色文字的方法教程
May 02 Python
python3使用SMTP发送简单文本邮件
Jun 19 Python
python cs架构实现简单文件传输
Mar 20 Python
使用python3批量下载rbsp数据的示例代码
Dec 20 Python
TensorFlow打印输出tensor的值
Apr 19 Python
django queryset相加和筛选教程
May 18 Python
Python中使用aiohttp模拟服务器出现错误问题及解决方法
Oct 31 Python
Python爬虫基础初探selenium
May 31 Python
Python 统计序列中元素的出现频度
Apr 26 Python
python对html过滤处理的方法
Oct 21 #Python
一看就懂得Python的math模块
Oct 21 #Python
python中将正则过滤的内容输出写入到文件中的实例
Oct 21 #Python
Python用5行代码写一个自定义简单二维码
Oct 21 #Python
python实现将文件夹下面的不是以py文件结尾的文件都过滤掉的方法
Oct 21 #Python
Python定时发送消息的脚本:每天跟你女朋友说晚安
Oct 21 #Python
用Django写天气预报查询网站
Oct 21 #Python
You might like
朋友网关于QQ相关的PHP代码(研究QQ的绝佳资料)
2015/01/26 PHP
对textarea框的代码调试,而且功能上使用非常方便,酷
2006/06/30 Javascript
JS日历 推荐
2006/12/03 Javascript
myeclipse安装jQuery插件的方法
2011/03/29 Javascript
JS获取鼠标坐标的实例方法
2013/07/18 Javascript
Jquery倒计时源码分享
2014/05/16 Javascript
用js传递value默认值的示例代码
2014/09/11 Javascript
ANGULARJS中用NG-BIND指令实现单向绑定的例子
2014/12/08 Javascript
JS自定义对象实现Java中Map对象功能的方法
2015/01/20 Javascript
JavaScript返回0-1之间随机数的方法
2015/04/06 Javascript
jQuery遍历页面所有CheckBox查看是否被选中的方法
2015/04/14 Javascript
javascript函数特点实例分析
2015/05/14 Javascript
JavaScript实现跨浏览器的添加及删除事件绑定函数实例
2015/08/04 Javascript
JavaScript从数组的indexOf()深入之Object的Property机制
2016/05/11 Javascript
js仿淘宝和百度文库的评分功能
2016/05/15 Javascript
jQuery根据表单name获取值的方法
2016/05/24 Javascript
基于JavaScript实现活动倒计时效果
2017/04/20 Javascript
解决Vue打包之后文件路径出错的问题
2018/03/06 Javascript
使用puppeteer爬取网站并抓出404无效链接
2018/12/20 Javascript
vue实现信息管理系统
2020/05/30 Javascript
Python常见格式化字符串方法小结【百分号与format方法】
2016/09/18 Python
基于python的Tkinter编写登陆注册界面
2017/06/30 Python
python迭代dict的key和value的方法
2018/07/06 Python
Python字典生成式、集合生成式、生成器用法实例分析
2020/01/07 Python
Python通过fnmatch模块实现文件名匹配
2020/09/30 Python
Python测试框架:pytest学习笔记
2020/10/20 Python
python 通过exifread读取照片信息
2020/12/24 Python
Timberland澳大利亚官网:全球领先的户外品牌
2019/12/10 全球购物
英国珠宝网站Argento: PANDORA、Olivia Burton和Nomination等
2020/05/08 全球购物
Windows和Linux动态库应用异同
2016/07/28 面试题
材料采购员岗位职责
2013/12/17 职场文书
文明青少年标兵事迹材料
2014/01/28 职场文书
最新会计专业求职信范文
2014/01/28 职场文书
vue前端工程的搭建
2021/03/31 Vue.js
用Python爬虫破解滑动验证码的案例解析
2021/05/06 Python
详解如何使用Nginx解决跨域问题
2022/05/06 Servers