Python过滤txt文件内重复内容的方法


Posted in Python onOctober 21, 2018

Python过滤txt文件内重复内容,并将过滤后的内容保存到新的txt中

示例如下

原文件

Python过滤txt文件内重复内容的方法

处理之后的文件

Python过滤txt文件内重复内容的方法

直接上代码

# -*-coding:utf-8 -*-
f = open("1.txt", "rb")
n = f.read()
f.close()
m = n.split("\r\n")
print "m=",m
print m[1]
m1 = []
for i in xrange(len(m)):
 if not m[i] in m1:
  m1.append(m[i])
print "m1=", m1
filename = open("1.0.txt", "wb")
for i in xrange(len(m1)):
 filename.write(m1[i]+"\n")

可看到结果

Python过滤txt文件内重复内容的方法

以上这篇Python过滤txt文件内重复内容的方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python中循环引用(import)失败的解决方法
Apr 22 Python
python 实现判断ip连通性的方法总结
Apr 22 Python
python实现支付宝当面付(扫码支付)功能
May 30 Python
python顺序的读取文件夹下名称有序的文件方法
Jul 11 Python
程序员写Python时的5个坏习惯,你有几条?
Nov 26 Python
把pandas转换int型为str型的方法
Jan 29 Python
python实现证件照换底功能
Aug 20 Python
python绘制无向图度分布曲线示例
Nov 22 Python
pytorch:实现简单的GAN示例(MNIST数据集)
Jan 10 Python
python默认参数调用方法解析
Feb 09 Python
Python爬取新型冠状病毒“谣言”新闻进行数据分析
Feb 16 Python
Python实现疫情地图可视化
Feb 05 Python
python对html过滤处理的方法
Oct 21 #Python
一看就懂得Python的math模块
Oct 21 #Python
python中将正则过滤的内容输出写入到文件中的实例
Oct 21 #Python
Python用5行代码写一个自定义简单二维码
Oct 21 #Python
python实现将文件夹下面的不是以py文件结尾的文件都过滤掉的方法
Oct 21 #Python
Python定时发送消息的脚本:每天跟你女朋友说晚安
Oct 21 #Python
用Django写天气预报查询网站
Oct 21 #Python
You might like
php Try Catch异常测试
2009/03/01 PHP
php xml留言板 xml存储数据的简单例子
2009/08/24 PHP
PHP遍历某个目录下的所有文件和子文件夹的实现代码
2013/06/28 PHP
Yii2语言国际化自动配置详解
2018/08/22 PHP
JavaScript 事件的一些重要说明
2009/10/25 Javascript
Jquery创建层显示标题和内容且随鼠标移动而移动
2014/01/26 Javascript
js实现每日自动换一张图片的方法
2015/05/04 Javascript
深入理解jquery跨域请求方法
2016/05/18 Javascript
关于Iframe父页面与子页面之间的相互调用
2016/11/22 Javascript
浅谈Node.js:Buffer模块
2016/12/05 Javascript
JS简单封装的图片无缝滚动效果示例【测试可用】
2017/03/22 Javascript
angular 用拦截器统一处理http请求和响应的方法
2017/06/08 Javascript
vue实现一个移动端屏蔽滑动的遮罩层实例
2017/06/08 Javascript
在vue中使用公共过滤器filter的方法
2018/06/26 Javascript
vue-cli中使用高德地图的方法示例
2019/03/28 Javascript
javascript实现抢购倒计时程序
2019/08/26 Javascript
Python实现对excel文件列表值进行统计的方法
2015/07/25 Python
实例解析Python中的__new__特殊方法
2016/06/02 Python
Python中序列的修改、散列与切片详解
2017/08/27 Python
python实现RabbitMQ的消息队列的示例代码
2018/11/08 Python
pycharm 实现显示project 选项卡的方法
2019/01/17 Python
浅谈Python3识别判断图片主要颜色并和颜色库进行对比的方法
2019/10/25 Python
Python多进程multiprocessing、进程池用法实例分析
2020/03/24 Python
Python爬取微信小程序通用方法代码实例详解
2020/09/29 Python
Java软件工程师综合面试题笔试题
2013/09/08 面试题
学生会竞选自荐信
2013/10/12 职场文书
校园元旦活动总结
2014/07/09 职场文书
故意伤害人身损害赔偿协议书
2014/11/19 职场文书
2014年度思想工作总结
2014/11/27 职场文书
大学毕业谢师宴致辞
2015/07/27 职场文书
食堂管理制度范本
2015/08/04 职场文书
丧事答谢词大全
2015/09/30 职场文书
2016小学优秀教师先进事迹材料
2016/02/26 职场文书
六年级作文之关于梦
2019/10/22 职场文书
python 爬取京东指定商品评论并进行情感分析
2021/05/27 Python
Java基础——Map集合
2022/04/01 Java/Android