Python过滤txt文件内重复内容的方法


Posted in Python onOctober 21, 2018

Python过滤txt文件内重复内容,并将过滤后的内容保存到新的txt中

示例如下

原文件

Python过滤txt文件内重复内容的方法

处理之后的文件

Python过滤txt文件内重复内容的方法

直接上代码

# -*-coding:utf-8 -*-
f = open("1.txt", "rb")
n = f.read()
f.close()
m = n.split("\r\n")
print "m=",m
print m[1]
m1 = []
for i in xrange(len(m)):
 if not m[i] in m1:
  m1.append(m[i])
print "m1=", m1
filename = open("1.0.txt", "wb")
for i in xrange(len(m1)):
 filename.write(m1[i]+"\n")

可看到结果

Python过滤txt文件内重复内容的方法

以上这篇Python过滤txt文件内重复内容的方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
django通过ajax发起请求返回JSON格式数据的方法
Jun 04 Python
浅谈Python 对象内存占用
Jul 15 Python
python如何统计序列中元素
Jul 31 Python
运行django项目指定IP和端口的方法
May 14 Python
django admin.py 外键,反向查询的实例
Jul 26 Python
Numpy对数组的操作:创建、变形(升降维等)、计算、取值、复制、分割、合并
Aug 28 Python
Python面向对象之继承原理与用法案例分析
Dec 31 Python
Python带参数的装饰器运行原理解析
Jun 09 Python
Python使用windows设置定时执行脚本
Nov 12 Python
Python爬虫之Selenium设置元素等待的方法
Dec 04 Python
Python实现随机生成迷宫并自动寻路
Jun 13 Python
C3 线性化算法与 MRO之Python中的多继承
Oct 05 Python
python对html过滤处理的方法
Oct 21 #Python
一看就懂得Python的math模块
Oct 21 #Python
python中将正则过滤的内容输出写入到文件中的实例
Oct 21 #Python
Python用5行代码写一个自定义简单二维码
Oct 21 #Python
python实现将文件夹下面的不是以py文件结尾的文件都过滤掉的方法
Oct 21 #Python
Python定时发送消息的脚本:每天跟你女朋友说晚安
Oct 21 #Python
用Django写天气预报查询网站
Oct 21 #Python
You might like
破解.net程序(dll文件)编译和反编译方法
2013/01/31 PHP
PHP修改session_id示例代码
2014/01/08 PHP
php中异常处理方法小结
2015/01/09 PHP
PHP数据的提交与过滤基本操作实例详解
2016/11/11 PHP
PHP获取input输入框中的值去数据库比较显示出来
2016/11/16 PHP
php字符集转换
2017/01/23 PHP
深入理解 PHP7 中全新的 zval 容器和引用计数机制
2018/10/15 PHP
Javascript客户端脚本的设计和应用
2006/08/21 Javascript
window.showModalDialog使用手册
2007/01/11 Javascript
jQuery插件 tabBox实现代码
2010/02/09 Javascript
jQuery中innerHeight()方法用法实例
2015/01/19 Javascript
zTree插件下拉树使用入门教程
2016/04/11 Javascript
nodejs开发——express路由与中间件
2017/03/24 NodeJs
Nuxt.js 数据双向绑定的实现
2019/02/17 Javascript
详解Vscode中使用Eslint终极配置大全
2019/11/08 Javascript
微信小程序拖拽排序列表的示例代码
2020/07/08 Javascript
[02:54]辉夜杯主赛事第二日败者组 iG.V赛后采访
2015/12/26 DOTA
[00:57]深扒TI7聊天轮盘语音出处5
2017/05/11 DOTA
Python time模块详解(常用函数实例讲解,非常好)
2014/04/24 Python
python中os和sys模块的区别与常用方法总结
2017/11/14 Python
利用pandas进行大文件计数处理的方法
2018/07/25 Python
如何使用Python实现斐波那契数列
2019/07/02 Python
python实现机器人卡牌
2019/10/06 Python
Python实现自动访问网页的例子
2020/02/21 Python
Python3 shelve对象持久存储原理详解
2020/03/23 Python
keras多显卡训练方式
2020/06/10 Python
CSS3中的display:grid,网格布局介绍
2019/10/30 HTML / CSS
职工运动会邀请函
2014/01/19 职场文书
《小儿垂钓》教学反思
2014/02/23 职场文书
尊老爱幼演讲稿
2014/09/04 职场文书
2015年挂职锻炼工作总结
2014/12/12 职场文书
幼儿园教师工作总结2015
2015/04/02 职场文书
2015年设计师个人工作总结
2015/04/25 职场文书
党员“一帮一”活动总结
2015/05/07 职场文书
五年级作文之劳动作文
2019/11/12 职场文书
一文搞懂Redis中String数据类型
2022/04/03 Redis