Python 逐行分割大txt文件的方法


Posted in Python onOctober 10, 2017

代码如下所示:

# -*- coding: <encoding name> -*-
import io
LIMIT = 150000
file_count = 0
url_list = []
with io.open('D:\DB_NEW_bak\DB_NEW_20171009_bak.sql','r',encoding='utf-16') as f:
  for line in f:
    url_list.append(line)
    if len(url_list) < LIMIT:
      continue
    file_name = str(file_count)+".sql"
    with io.open(file_name,'w',encoding='utf-16') as file:
      for url in url_list[:-1]:
        file.write(url)
      file.write(url_list[-1].strip())
      url_list=[]
      file_count+=1
if url_list:
  file_name = str(file_count) + ".sql"
  with io.open(file_name,'w',encoding='utf-16') as file:
    for url in url_list:
      file.write(url)
print('done')

Python从txt文件中逐行读取数据

非常的简单,提供三种方法:

方法一:

f = open("foo.txt")       # 返回一个文件对象 
line = f.readline()       # 调用文件的 readline()方法 
while line: 
  print line,         # 后面跟 ',' 将忽略换行符 
  # print(line, end = '') # 在 Python 3中使用 
  line = f.readline() 
 
f.close()

方法二:

for line in open("foo.txt"): 
  print line,

方法三:

f = open("c:\\1.txt","r") 
lines = f.readlines()#读取全部内容 
for line in lines 
  print line

总结

以上所述是小编给大家介绍的Python 逐行分割大txt文件,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对三水点靠木网站的支持!

Python 相关文章推荐
Python中关于字符串对象的一些基础知识
Apr 08 Python
在Python中使用HTMLParser解析HTML的教程
Apr 29 Python
Python实现各种排序算法的代码示例总结
Dec 11 Python
Django Admin实现上传图片校验功能
Mar 06 Python
Python 统计字数的思路详解
May 08 Python
浅析python参数的知识点
Dec 10 Python
Kears+Opencv实现简单人脸识别
Aug 28 Python
python3的UnicodeDecodeError解决方法
Dec 20 Python
python关于调用函数外的变量实例
Dec 26 Python
Python实现FLV视频拼接功能
Jan 21 Python
python GUI库图形界面开发之PyQt5信号与槽多窗口数据传递详细使用方法与实例
Mar 08 Python
基于PyTorch的permute和reshape/view的区别介绍
Jun 18 Python
Python输出带颜色的字符串实例
Oct 10 #Python
python中使用正则表达式的连接符示例代码
Oct 10 #Python
python利用正则表达式排除集合中字符的功能示例
Oct 10 #Python
python 上下文管理器使用方法小结
Oct 10 #Python
python中如何使用正则表达式的集合字符示例
Oct 09 #Python
python中如何使用正则表达式的非贪婪模式示例
Oct 09 #Python
Python 多进程和数据传递的理解
Oct 09 #Python
You might like
写一个用户在线显示的程序
2006/10/09 PHP
PHP的开发框架的现状和展望
2007/03/16 PHP
安装apache2.2.22配置php5.4(具体操作步骤)
2013/06/26 PHP
PHP邮箱验证示例教程
2016/06/01 PHP
原生javascript实现图片轮播效果代码
2010/09/03 Javascript
jquery学习笔记 用jquery实现无刷新登录
2011/08/08 Javascript
js实现模拟计算器退格键删除文字效果的方法
2015/05/07 Javascript
jQuery获取访问者IP地址的方法(基于新浪API与QQ查询接口)
2016/05/25 Javascript
Vue.js第四天学习笔记(组件)
2016/12/02 Javascript
Node连接mysql数据库方法介绍
2017/02/07 Javascript
基于JavaScript实现活动倒计时效果
2017/04/20 Javascript
解决nodejs的npm命令无反应的问题
2018/05/17 NodeJs
js根据json数据中的某一个属性来给数据分组的方法
2018/10/08 Javascript
Vue函数式组件的应用实例详解
2019/08/30 Javascript
JS实现的定时器展示简单秒表、页面弹框及跳转操作完整示例
2020/01/26 Javascript
vue中echarts引入中国地图的案例
2020/07/28 Javascript
[06:21]完美世界亚洲区首席发行官竺琦TI3采访
2013/08/26 DOTA
python sort、sorted高级排序技巧
2014/11/21 Python
Python测试网络连通性示例【基于ping】
2018/08/03 Python
python 杀死自身进程的实现方法
2019/07/01 Python
python利用wx实现界面按钮和按钮监听和字体改变的方法
2019/07/17 Python
python统计字符串中字母出现次数代码实例
2020/03/02 Python
python中线程和进程有何区别
2020/06/17 Python
详解Python IO编程
2020/07/24 Python
Python读取多列数据以及用matplotlib制作图表方法实例
2020/09/23 Python
python利用后缀表达式实现计算器功能
2021/02/22 Python
matplotlib bar()实现多组数据并列柱状图通用简便创建方法
2021/02/24 Python
遮罩层 + Iframe实现界面自动显示的示例代码
2020/04/26 HTML / CSS
美国最大的烧烤架和户外生活用品专业零售商:Barbeques Galore
2021/01/09 全球购物
如何设定的weblogic的热启动模式(开发模式)与产品发布模式
2012/09/08 面试题
党课心得体会范文
2014/09/09 职场文书
2014市府办领导班子“四风问题”对照检查材料思想汇报
2014/09/24 职场文书
英语专业毕业论文答辩开场白
2015/05/27 职场文书
建党伟业电影观后感
2015/06/01 职场文书
实习指导老师意见
2015/06/04 职场文书
2019年感恩励志演讲稿(收藏备用)
2019/09/11 职场文书