Python过滤txt文件内重复内容的方法


Posted in Python onOctober 21, 2018

Python过滤txt文件内重复内容,并将过滤后的内容保存到新的txt中

示例如下

原文件

Python过滤txt文件内重复内容的方法

处理之后的文件

Python过滤txt文件内重复内容的方法

直接上代码

# -*-coding:utf-8 -*-
f = open("1.txt", "rb")
n = f.read()
f.close()
m = n.split("\r\n")
print "m=",m
print m[1]
m1 = []
for i in xrange(len(m)):
 if not m[i] in m1:
  m1.append(m[i])
print "m1=", m1
filename = open("1.0.txt", "wb")
for i in xrange(len(m1)):
 filename.write(m1[i]+"\n")

可看到结果

Python过滤txt文件内重复内容的方法

以上这篇Python过滤txt文件内重复内容的方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python如何实现守护进程的方法示例
Feb 08 Python
Python实现读取json文件到excel表
Nov 18 Python
Pyinstaller将py打包成exe的实例
Mar 31 Python
获取python的list中含有重复值的index方法
Jun 27 Python
Python学习笔记之图片人脸检测识别实例教程
Mar 06 Python
python模拟键盘输入 切换键盘布局过程解析
Aug 15 Python
python中bytes和str类型的区别
Oct 21 Python
简单了解python shutil模块原理及使用方法
Apr 28 Python
解决python中import文件夹下面py文件报错问题
Jun 01 Python
使用AJAX和Django获取数据的方法实例
Oct 25 Python
Python 远程开关机的方法
Nov 18 Python
详解Django自定义图片和文件上传路径(upload_to)的2种方式
Dec 01 Python
python对html过滤处理的方法
Oct 21 #Python
一看就懂得Python的math模块
Oct 21 #Python
python中将正则过滤的内容输出写入到文件中的实例
Oct 21 #Python
Python用5行代码写一个自定义简单二维码
Oct 21 #Python
python实现将文件夹下面的不是以py文件结尾的文件都过滤掉的方法
Oct 21 #Python
Python定时发送消息的脚本:每天跟你女朋友说晚安
Oct 21 #Python
用Django写天气预报查询网站
Oct 21 #Python
You might like
动态生成gif格式的图像要注意?
2006/10/09 PHP
php下利用curl判断远程文件是否存在的实现代码
2011/10/08 PHP
php上传后台无法收到数据解决方法
2019/10/28 PHP
基于jquery DOM写的类似微博发布的效果
2012/10/20 Javascript
javascript变量声明实例分析
2015/04/25 Javascript
JavaScript检测鼠标移动方向的方法
2015/05/22 Javascript
JavaScript职责链模式概述
2016/09/17 Javascript
angular.js指令中transclude选项及ng-transclude指令详解
2017/05/24 Javascript
JS移动端/H5同时选择多张图片上传并使用canvas压缩图片
2017/06/20 Javascript
vue 本地环境跨域请求proxyTable的方法
2018/09/19 Javascript
JS字符串常用操作方法实例小结
2019/06/24 Javascript
js实现点击图片在屏幕中间弹出放大效果
2019/09/11 Javascript
d3.js实现图形缩放平移
2019/12/19 Javascript
Vue 集成 PDF.js 实现 PDF 预览和添加水印的步骤
2021/01/22 Vue.js
[03:20]2015国际邀请赛全明星表演赛
2015/08/08 DOTA
python多进程和多线程究竟谁更快(详解)
2017/05/29 Python
解决Python 爬虫URL中存在中文或特殊符号无法请求的问题
2018/05/11 Python
python安装twisted的问题解析
2018/08/21 Python
对Python捕获控制台输出流的方法详解
2019/01/07 Python
使用Python检测文章抄袭及去重算法原理解析
2019/06/14 Python
浅谈Python2之汉字编码为unicode的问题(即类似\xc3\xa4)
2019/08/12 Python
pytorch实现对输入超过三通道的数据进行训练
2020/01/15 Python
python统计字符串中字母出现次数代码实例
2020/03/02 Python
在pycharm中使用matplotlib.pyplot 绘图时报错的解决
2020/06/01 Python
如何利用python检测图片是否包含二维码
2020/10/15 Python
CSS3绘制超炫的上下起伏波动进度加载动画
2016/04/21 HTML / CSS
Invicta手表官方商店:百年制表历史的瑞士腕表品牌
2019/09/26 全球购物
学生自我鉴定范文
2013/10/04 职场文书
食品安全处置方案
2014/06/14 职场文书
五一口号
2014/06/19 职场文书
买房协议书范本
2014/10/23 职场文书
简历自我评价优缺点
2015/03/11 职场文书
机关保密工作承诺书
2015/05/04 职场文书
2015年民兵整组工作总结
2015/07/24 职场文书
初中语文教师研修日志
2015/11/13 职场文书
mysql自增长id用完了该怎么办
2022/02/12 MySQL