Python过滤txt文件内重复内容的方法


Posted in Python onOctober 21, 2018

Python过滤txt文件内重复内容,并将过滤后的内容保存到新的txt中

示例如下

原文件

Python过滤txt文件内重复内容的方法

处理之后的文件

Python过滤txt文件内重复内容的方法

直接上代码

# -*-coding:utf-8 -*-
f = open("1.txt", "rb")
n = f.read()
f.close()
m = n.split("\r\n")
print "m=",m
print m[1]
m1 = []
for i in xrange(len(m)):
 if not m[i] in m1:
  m1.append(m[i])
print "m1=", m1
filename = open("1.0.txt", "wb")
for i in xrange(len(m1)):
 filename.write(m1[i]+"\n")

可看到结果

Python过滤txt文件内重复内容的方法

以上这篇Python过滤txt文件内重复内容的方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python使用datetime模块计算各种时间间隔的方法
Mar 24 Python
python更改已存在excel文件的方法
May 03 Python
python 统计数组中元素出现次数并进行排序的实例
Jul 02 Python
Python实现对字典分别按键(key)和值(value)进行排序的方法分析
Dec 19 Python
python交换两个变量的值方法
Jan 12 Python
python实现全盘扫描搜索功能的方法
Feb 14 Python
Python中单线程、多线程和多进程的效率对比实验实例
May 14 Python
python中for循环变量作用域及用法详解
Nov 05 Python
Flask框架请求钩子与request请求对象用法实例分析
Nov 07 Python
python开发前景如何
Jun 11 Python
Python读取Excel数据并生成图表过程解析
Jun 18 Python
python上下文管理器异常问题解决方法
Feb 07 Python
python对html过滤处理的方法
Oct 21 #Python
一看就懂得Python的math模块
Oct 21 #Python
python中将正则过滤的内容输出写入到文件中的实例
Oct 21 #Python
Python用5行代码写一个自定义简单二维码
Oct 21 #Python
python实现将文件夹下面的不是以py文件结尾的文件都过滤掉的方法
Oct 21 #Python
Python定时发送消息的脚本:每天跟你女朋友说晚安
Oct 21 #Python
用Django写天气预报查询网站
Oct 21 #Python
You might like
PHP脚本的10个技巧(7)
2006/10/09 PHP
php快速url重写 更新版[需php 5.30以上]
2010/04/20 PHP
php往mysql中批量插入数据实例教程
2018/12/12 PHP
php如何利用pecl安装mongodb扩展详解
2019/01/09 PHP
jquery select下拉框操作的一些说明
2010/04/02 Javascript
Jquery从头学起第四讲 jquery入门教程
2010/08/01 Javascript
javascript textarea光标定位方法(兼容IE和FF)
2011/03/12 Javascript
JS 两日期相减,获得天数的小例子(兼容IE,FF)
2013/07/01 Javascript
JS+CSS实现类似QQ好友及黑名单效果的树型菜单
2015/09/22 Javascript
AngularJS实现Model缓存的方式
2016/02/03 Javascript
HTML页面定时跳转方法解析(2种任选)
2016/12/22 Javascript
简单的Vue异步组件实例Demo
2017/12/27 Javascript
angular写一个列表的选择全选交互组件的示例
2018/01/22 Javascript
基于VuePress 轻量级静态网站生成器的实现方法
2018/04/17 Javascript
关于Vue项目跨平台运行问题的解决方法
2018/09/18 Javascript
小程序实现展开/收起的效果示例
2018/09/22 Javascript
jquery多级树形下拉菜单的实例代码
2019/07/09 jQuery
改变layer confirm弹窗按钮的颜色方法
2019/09/12 Javascript
解决layui laydate 时间控件一闪而过的问题
2019/09/28 Javascript
js对象属性名驼峰式转下划线的实例代码
2020/09/17 Javascript
vue 解决provide和inject响应的问题
2020/11/12 Javascript
[01:10]为家乡而战!完美世界城市挑战赛全国总决赛花絮
2019/07/25 DOTA
Python学习笔记之常用函数及说明
2014/05/23 Python
python requests.post带head和body的实例
2019/01/02 Python
用pycharm开发django项目示例代码
2019/06/13 Python
Python使用jupyter notebook查看ipynb文件过程解析
2020/06/02 Python
python制作抽奖程序代码详解
2021/01/15 Python
英国在线定制百叶窗网站:Swift Direct Blinds
2020/02/25 全球购物
SQL注入攻击的种类有哪些
2013/12/30 面试题
How TDD works
2012/09/30 面试题
餐饮总经理岗位职责
2014/03/07 职场文书
2014年民主评议党员个人总结
2014/09/24 职场文书
2014年个人委托书范本
2014/10/13 职场文书
建议书格式
2015/02/04 职场文书
小学语文教师研修日志
2015/11/13 职场文书
使用pandas生成/读取csv文件的方法实例
2021/07/09 Python