Python过滤txt文件内重复内容的方法


Posted in Python onOctober 21, 2018

Python过滤txt文件内重复内容,并将过滤后的内容保存到新的txt中

示例如下

原文件

Python过滤txt文件内重复内容的方法

处理之后的文件

Python过滤txt文件内重复内容的方法

直接上代码

# -*-coding:utf-8 -*-
f = open("1.txt", "rb")
n = f.read()
f.close()
m = n.split("\r\n")
print "m=",m
print m[1]
m1 = []
for i in xrange(len(m)):
 if not m[i] in m1:
  m1.append(m[i])
print "m1=", m1
filename = open("1.0.txt", "wb")
for i in xrange(len(m1)):
 filename.write(m1[i]+"\n")

可看到结果

Python过滤txt文件内重复内容的方法

以上这篇Python过滤txt文件内重复内容的方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python中几种导入模块的方式总结
Apr 27 Python
python如何使用正则表达式的前向、后向搜索及前向搜索否定模式详解
Nov 08 Python
使用python和Django完成博客数据库的迁移方法
Jan 05 Python
Python解决抛小球问题 求小球下落经历的距离之和示例
Feb 01 Python
浅谈Python的list中的选取范围
Nov 12 Python
Python的iOS自动化打包实例代码
Nov 22 Python
详解django+django-celery+celery的整合实战
Mar 19 Python
在Python中过滤Windows文件名中的非法字符方法
Jun 10 Python
Pycharm debug调试时带参数过程解析
Feb 03 Python
spyder 在控制台(console)执行python文件,debug python程序方式
Apr 20 Python
python 实现图片修复(可用于去水印)
Nov 19 Python
Python 读取千万级数据自动写入 MySQL 数据库
Jun 28 Python
python对html过滤处理的方法
Oct 21 #Python
一看就懂得Python的math模块
Oct 21 #Python
python中将正则过滤的内容输出写入到文件中的实例
Oct 21 #Python
Python用5行代码写一个自定义简单二维码
Oct 21 #Python
python实现将文件夹下面的不是以py文件结尾的文件都过滤掉的方法
Oct 21 #Python
Python定时发送消息的脚本:每天跟你女朋友说晚安
Oct 21 #Python
用Django写天气预报查询网站
Oct 21 #Python
You might like
php站内搜索关键词变亮的实现方法
2014/12/30 PHP
PHP中加速、缓存扩展的区别和作用详解(eAccelerator、memcached、xcache、APC )
2016/07/09 PHP
利用PHP判断文件是否为图片的方法总结
2017/01/06 PHP
Ajax请求PHP后台接口返回信息的实例代码
2018/08/21 PHP
Javascript 篱式条件判断
2008/08/22 Javascript
基于jQuery的仿flash的广告轮播
2010/11/05 Javascript
js中replace的用法总结
2013/12/27 Javascript
jQuery实现跟随鼠标运动图层效果的方法
2015/02/02 Javascript
JavaScript把数组作为堆栈使用的方法
2015/03/20 Javascript
JS中的THIS和WINDOW.EVENT.SRCELEMENT详解
2015/05/25 Javascript
JavaScript实现文本框中默认显示背景图片在获得焦点后消失的方法
2015/07/01 Javascript
判断js的Array和Object的实现方法
2016/08/29 Javascript
基于JS实现类似支付宝支付密码输入框
2016/09/02 Javascript
js HTML5手机刮刮乐代码
2020/09/29 Javascript
JS两种类型的表单提交方法实例分析
2016/11/28 Javascript
js获取ip和地区
2017/03/10 Javascript
vue 纯js监听滚动条到底部的实例讲解
2018/09/03 Javascript
layer插件实现在弹出层中弹出一警告提示并关闭弹出层的方法
2019/09/24 Javascript
vant 时间选择器--开始时间和结束时间实例
2020/11/04 Javascript
[00:43]2016完美“圣”典风云人物:单车宣传片
2016/12/02 DOTA
python实现的简单抽奖系统实例
2015/05/22 Python
Python读csv文件去掉一列后再写入新的文件实例
2017/12/28 Python
python2.7 json 转换日期的处理的示例
2018/03/07 Python
Redis使用watch完成秒杀抢购功能的代码
2018/05/07 Python
关于Python-faker的函数效果一览
2019/11/28 Python
python GUI库图形界面开发之PyQt5日期时间控件QDateTimeEdit详细使用方法与实例
2020/02/27 Python
Python 制作查询商品历史价格的小工具
2020/10/20 Python
canvas像素点操作之视频绿幕抠图
2018/09/11 HTML / CSS
台湾百利市购物中心:e-Payless
2017/08/16 全球购物
大学生个人推荐信范文
2013/11/25 职场文书
《那片绿绿的爬山虎》教学反思
2014/02/27 职场文书
勤俭节约演讲稿
2014/05/08 职场文书
铅球加油稿100字
2014/09/26 职场文书
学习十八届四中全会精神思想汇报
2014/10/23 职场文书
群众路线个人整改措施
2014/10/24 职场文书
“爱眼护眼,提前预防近视”倡议书3篇
2019/10/30 职场文书