Python过滤txt文件内重复内容的方法


Posted in Python onOctober 21, 2018

Python过滤txt文件内重复内容,并将过滤后的内容保存到新的txt中

示例如下

原文件

Python过滤txt文件内重复内容的方法

处理之后的文件

Python过滤txt文件内重复内容的方法

直接上代码

# -*-coding:utf-8 -*-
f = open("1.txt", "rb")
n = f.read()
f.close()
m = n.split("\r\n")
print "m=",m
print m[1]
m1 = []
for i in xrange(len(m)):
 if not m[i] in m1:
  m1.append(m[i])
print "m1=", m1
filename = open("1.0.txt", "wb")
for i in xrange(len(m1)):
 filename.write(m1[i]+"\n")

可看到结果

Python过滤txt文件内重复内容的方法

以上这篇Python过滤txt文件内重复内容的方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python 正则表达式 概述及常用字符
May 04 Python
Python使用matplotlib和pandas实现的画图操作【经典示例】
Jun 13 Python
对python 命令的-u参数详解
Dec 03 Python
python+selenium实现QQ邮箱自动发送功能
Jan 23 Python
python环境路径配置以及命令行运行脚本
Apr 02 Python
python单例模式原理与创建方法实例分析
Oct 26 Python
python异步Web框架sanic的实现
Apr 27 Python
基于Tensorflow一维卷积用法详解
May 22 Python
pandas参数设置的实用小技巧
Aug 23 Python
C++和python实现阿姆斯特朗数字查找实例代码
Dec 07 Python
分享一个python的aes加密代码
Dec 22 Python
解决PDF 转图片时丢文字的一种可能方式
Mar 04 Python
python对html过滤处理的方法
Oct 21 #Python
一看就懂得Python的math模块
Oct 21 #Python
python中将正则过滤的内容输出写入到文件中的实例
Oct 21 #Python
Python用5行代码写一个自定义简单二维码
Oct 21 #Python
python实现将文件夹下面的不是以py文件结尾的文件都过滤掉的方法
Oct 21 #Python
Python定时发送消息的脚本:每天跟你女朋友说晚安
Oct 21 #Python
用Django写天气预报查询网站
Oct 21 #Python
You might like
新手配置 PHP 调试环境(IIS+PHP+MYSQL)
2007/01/10 PHP
php上的memcache和memcached两个pecl库
2010/03/29 PHP
php静态文件返回304技巧分享
2015/01/06 PHP
php英文单词统计器
2016/06/23 PHP
PHP+JavaScript实现无刷新上传图片
2017/02/21 PHP
CL vs ForZe BO5 第一场 2.13
2021/03/10 DOTA
js格式化时间和js格式化时间戳示例
2014/02/10 Javascript
JavaScript判断变量是对象还是数组的方法
2014/08/28 Javascript
JavaScript中的操作符==与===介绍
2014/12/31 Javascript
JSON键值对序列化和反序列化解析
2017/01/24 Javascript
js模态对话框使用方法详解
2017/02/16 Javascript
Vuex的初探与实战小结
2018/11/26 Javascript
vue 实现根据data中的属性值来设置不同的样式
2020/08/04 Javascript
一篇文章带你搞懂Vue虚拟Dom与diff算法
2020/08/25 Javascript
把MySQL表结构映射为Python中的对象的教程
2015/04/07 Python
将Django使用的数据库从MySQL迁移到PostgreSQL的教程
2015/04/11 Python
用ReactJS和Python的Flask框架编写留言板的代码示例
2015/12/19 Python
Python的Socket编程过程中实现UDP端口复用的实例分享
2016/03/19 Python
Python新手们容易犯的几个错误总结
2017/04/01 Python
python获取外网IP并发邮件的实现方法
2017/10/01 Python
python实现QQ邮箱/163邮箱的邮件发送
2019/01/22 Python
python多进程(加入进程池)操作常见案例
2019/10/21 Python
关于Python解包知识点总结
2020/05/05 Python
pandas数据处理之绘图的实现
2020/06/15 Python
python爬虫可以爬什么
2020/06/16 Python
Python Request类源码实现方法及原理解析
2020/08/17 Python
python time()的实例用法
2020/11/03 Python
python 批量下载bilibili视频的gui程序
2020/11/20 Python
英国领先的电视购物零售商:Ideal World
2019/03/18 全球购物
校园创业策划书
2014/01/14 职场文书
关于抽烟的检讨书
2014/02/25 职场文书
2015国庆节放假通知范文
2015/07/30 职场文书
校园安全教育心得体会
2016/01/15 职场文书
nginx如何将http访问的网站改成https访问
2021/03/31 Servers
nginx对http请求处理的各个阶段详析
2021/03/31 Servers
VS2019连接MySQL数据库的过程及常见问题总结
2021/11/27 MySQL