Python 逐行分割大txt文件的方法


Posted in Python onOctober 10, 2017

代码如下所示:

# -*- coding: <encoding name> -*-
import io
LIMIT = 150000
file_count = 0
url_list = []
with io.open('D:\DB_NEW_bak\DB_NEW_20171009_bak.sql','r',encoding='utf-16') as f:
  for line in f:
    url_list.append(line)
    if len(url_list) < LIMIT:
      continue
    file_name = str(file_count)+".sql"
    with io.open(file_name,'w',encoding='utf-16') as file:
      for url in url_list[:-1]:
        file.write(url)
      file.write(url_list[-1].strip())
      url_list=[]
      file_count+=1
if url_list:
  file_name = str(file_count) + ".sql"
  with io.open(file_name,'w',encoding='utf-16') as file:
    for url in url_list:
      file.write(url)
print('done')

Python从txt文件中逐行读取数据

非常的简单,提供三种方法:

方法一:

f = open("foo.txt")       # 返回一个文件对象 
line = f.readline()       # 调用文件的 readline()方法 
while line: 
  print line,         # 后面跟 ',' 将忽略换行符 
  # print(line, end = '') # 在 Python 3中使用 
  line = f.readline() 
 
f.close()

方法二:

for line in open("foo.txt"): 
  print line,

方法三:

f = open("c:\\1.txt","r") 
lines = f.readlines()#读取全部内容 
for line in lines 
  print line

总结

以上所述是小编给大家介绍的Python 逐行分割大txt文件,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对三水点靠木网站的支持!

Python 相关文章推荐
为Python的web框架编写MVC配置来使其运行的教程
Apr 30 Python
python&amp;MongoDB爬取图书馆借阅记录
Feb 05 Python
python回调函数中使用多线程的方法
Dec 25 Python
python之super的使用小结
Aug 13 Python
Python函数和模块的使用总结
May 20 Python
检测python爬虫时是否代理ip伪装成功的方法
Jul 12 Python
python实现点击按钮修改数据的方法
Jul 17 Python
Python中的 sort 和 sorted的用法与区别
Aug 10 Python
Win系统PyQt5安装和使用教程
Dec 25 Python
python中如何进行连乘计算
May 28 Python
Python中的__init__作用是什么
Jun 09 Python
Python 整行读取文本方法并去掉readlines换行\n操作
Sep 03 Python
Python输出带颜色的字符串实例
Oct 10 #Python
python中使用正则表达式的连接符示例代码
Oct 10 #Python
python利用正则表达式排除集合中字符的功能示例
Oct 10 #Python
python 上下文管理器使用方法小结
Oct 10 #Python
python中如何使用正则表达式的集合字符示例
Oct 09 #Python
python中如何使用正则表达式的非贪婪模式示例
Oct 09 #Python
Python 多进程和数据传递的理解
Oct 09 #Python
You might like
php检测图片木马多进制编程实践
2013/04/11 PHP
php获取网卡的MAC地址支持WIN/LINUX系统
2014/04/30 PHP
PHP简单获取随机数的常用方法小结
2017/06/07 PHP
php JWT在web端中的使用方法教程
2018/09/06 PHP
javascript 函数使用说明
2010/04/07 Javascript
如何使用jQuery Draggable和Droppable实现拖拽功能
2013/07/05 Javascript
jQuery处理xml格式的返回数据(实例解析)
2013/11/28 Javascript
jQuery DOM删除节点操作指南
2015/03/03 Javascript
Bootstrap表单布局样式源代码
2016/07/04 Javascript
JS弹出新窗口被拦截的解决方法
2016/08/09 Javascript
深入理解React中es6创建组件this的方法
2016/08/29 Javascript
JS常见简单正则表达式验证功能小结【手机,地址,企业税号,金额,身份证等】
2017/01/22 Javascript
js实现文字无缝向上滚动
2017/02/16 Javascript
基于JavaScript表单脚本(详解)
2017/10/18 Javascript
微信小程序实现图片放大预览功能
2020/10/22 Javascript
Python使用redis pool的一种单例实现方式
2016/04/16 Python
python如何使用unittest测试接口
2018/04/04 Python
Python实现中一次读取多个值的方法
2018/04/22 Python
python爬虫基础教程:requests库(二)代码实例
2019/04/09 Python
Python3网络爬虫开发实战之极验滑动验证码的识别
2019/08/02 Python
python可视化实现KNN算法
2019/10/16 Python
Flask框架 CSRF 保护实现方法详解
2019/10/30 Python
Python使用Tkinter实现滚动抽奖器效果
2020/01/06 Python
pandas和spark dataframe互相转换实例详解
2020/02/18 Python
python有几个版本
2020/06/17 Python
遮罩层 + Iframe实现界面自动显示的示例代码
2020/04/26 HTML / CSS
美国便宜的横幅和标志印刷在线:Best of Signs
2019/05/29 全球购物
您在慕尼黑的跑步商店:Lauf-bar
2019/10/11 全球购物
LUISAVIAROMA德国官网:时尚奢侈品牌购物网站
2020/11/12 全球购物
Linux管理员面试经常问道的相关命令
2014/12/12 面试题
历史专业毕业生的自我鉴定
2013/11/15 职场文书
人事主管岗位职责范本
2013/12/04 职场文书
商业用房租赁协议书
2014/10/13 职场文书
信仰纪录片观后感
2015/06/08 职场文书
法制教育主题班会
2015/08/13 职场文书
2016年学校“6﹒26国际禁毒日”宣传活动总结
2016/04/05 职场文书