Python过滤txt文件内重复内容的方法


Posted in Python onOctober 21, 2018

Python过滤txt文件内重复内容,并将过滤后的内容保存到新的txt中

示例如下

原文件

Python过滤txt文件内重复内容的方法

处理之后的文件

Python过滤txt文件内重复内容的方法

直接上代码

# -*-coding:utf-8 -*-
f = open("1.txt", "rb")
n = f.read()
f.close()
m = n.split("\r\n")
print "m=",m
print m[1]
m1 = []
for i in xrange(len(m)):
 if not m[i] in m1:
  m1.append(m[i])
print "m1=", m1
filename = open("1.0.txt", "wb")
for i in xrange(len(m1)):
 filename.write(m1[i]+"\n")

可看到结果

Python过滤txt文件内重复内容的方法

以上这篇Python过滤txt文件内重复内容的方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python的Urllib库的基本使用教程
Apr 30 Python
python 表达式和语句及for、while循环练习实例
Jul 07 Python
python爬虫 正则表达式使用技巧及爬取个人博客的实例讲解
Oct 20 Python
python取代netcat过程分析
Feb 10 Python
python numpy和list查询其中某个数的个数及定位方法
Jun 27 Python
python实现给微信指定好友定时发送消息
Apr 29 Python
python多进程并行代码实例
Sep 30 Python
Python中xml和dict格式转换的示例代码
Nov 07 Python
python给指定csv表格中的联系人群发邮件(带附件的邮件)
Dec 31 Python
Python实现对word文档添加密码去除密码的示例代码
Dec 29 Python
2021年值得向Python开发者推荐的VS Code扩展插件
Jan 25 Python
PyTorch 如何检查模型梯度是否可导
Jun 05 Python
python对html过滤处理的方法
Oct 21 #Python
一看就懂得Python的math模块
Oct 21 #Python
python中将正则过滤的内容输出写入到文件中的实例
Oct 21 #Python
Python用5行代码写一个自定义简单二维码
Oct 21 #Python
python实现将文件夹下面的不是以py文件结尾的文件都过滤掉的方法
Oct 21 #Python
Python定时发送消息的脚本:每天跟你女朋友说晚安
Oct 21 #Python
用Django写天气预报查询网站
Oct 21 #Python
You might like
我的论坛源代码(七)
2006/10/09 PHP
php使用Smarty的相关注意事项及访问变量的几种方式
2011/12/08 PHP
php除数取整示例
2014/04/24 PHP
php的laravel框架快速集成微信登录的方法
2016/12/12 PHP
PHP实现负载均衡session共享redis缓存操作示例
2018/08/22 PHP
CentOS7.0下安装PHP5.6.30服务的教程详解
2018/09/29 PHP
jQuery解决下拉框select设宽度时IE 6/7/8下option超出显示不全
2013/05/27 Javascript
javascript firefox 自动加载iframe 自动调整高宽示例
2013/08/27 Javascript
jQuery简单实现彩色云标签效果示例
2016/08/01 Javascript
预防网页挂马的方法总结
2016/11/03 Javascript
JSON字符串和JSON对象相互转化实例详解
2017/01/05 Javascript
微信小程序 页面跳转及数据传递详解
2017/03/14 Javascript
Vue.js实战之组件之间的数据传递
2017/04/01 Javascript
在 vue-cli v3.0 中使用 SCSS/SASS的方法
2018/06/14 Javascript
浅谈layui 数据表格前后台传值的问题
2019/09/12 Javascript
[01:04:01]2014 DOTA2华西杯精英邀请赛5 24 DK VS VG
2014/05/25 DOTA
[02:47]DOTA2亚洲邀请赛 HR战队出场宣传片
2015/02/07 DOTA
Python3 能振兴 Python的原因分析
2014/11/28 Python
numpy给array增加维度np.newaxis的实例
2018/11/01 Python
Python PIL读取的图像发生自动旋转的实现方法
2019/07/05 Python
Django url 路由匹配过程详解
2021/01/22 Python
CSS3中几个新增加的盒模型属性使用教程
2016/03/01 HTML / CSS
html5音频_动力节点Java学院整理
2018/08/22 HTML / CSS
amaze ui 的使用详细教程
2020/08/19 HTML / CSS
美国大型的健身社区和补充商店:Bodybuilding.com
2016/09/06 全球购物
写出一个方法实现冒泡排序
2016/07/08 面试题
如何在Shell脚本中使用函数
2015/09/06 面试题
学习雷锋寄语大全
2014/04/11 职场文书
实习生岗位职责
2014/04/12 职场文书
文体活动总结范文
2014/05/05 职场文书
最美孝心少年事迹材料
2014/08/15 职场文书
运动会演讲稿300字
2014/08/25 职场文书
领导党的群众路线教育实践活动个人对照检查材料
2014/09/23 职场文书
食堂卫生管理制度
2015/08/04 职场文书
小学数学新课改心得体会
2016/01/22 职场文书
教你如何让spark sql写mysql的时候支持update操作
2022/02/15 MySQL