python读取几个G的csv文件方法


Posted in Python onJanuary 07, 2019

如下所示:

import pandas as pd
file = pd.read_csv('file.csv',iterator=True)
while True:
  chunk = file.get_chunk(1000)
  print(chunk.head(10))
  print(chunk.tail(10))

以上这篇python读取几个G的csv文件方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
利用Python如何实现一个小说网站雏形
Nov 23 Python
在python里从协程返回一个值的示例
Feb 19 Python
Python基于scipy实现信号滤波功能
May 08 Python
python opencv调用笔记本摄像头
Aug 28 Python
简单了解django文件下载方式
Feb 10 Python
python识别验证码图片实例详解
Feb 17 Python
基于Python数据分析之pandas统计分析
Mar 03 Python
Python基于read(size)方法读取超大文件
Mar 12 Python
Django添加bootstrap框架时无法加载静态文件的解决方式
Mar 27 Python
解决python3输入的坑——input()
Dec 05 Python
Python 中数组和数字相乘时的注意事项说明
May 10 Python
Pandas实现DataFrame的简单运算、统计与排序
Mar 31 Python
实时获取Python的print输出流方法
Jan 07 #Python
Python 运行 shell 获取输出结果的实例
Jan 07 #Python
在python 中实现运行多条shell命令
Jan 07 #Python
Python之使用adb shell命令启动应用的方法详解
Jan 07 #Python
python 对多个csv文件分别进行处理的方法
Jan 07 #Python
python 同时运行多个程序的实例
Jan 07 #Python
python实现将多个文件分配到多个文件夹的方法
Jan 07 #Python
You might like
PHP中利用substr_replace将指定两位置之间的字符替换为*号
2011/01/27 PHP
PHP中常用的魔术方法
2017/04/28 PHP
PHP设计模式之工厂方法设计模式实例分析
2018/04/25 PHP
js Form.elements[i]的使用实例
2011/11/13 Javascript
jquery select多选框的左右移动 具体实现代码
2013/07/03 Javascript
html5 canvas js(数字时钟)实例代码
2013/12/23 Javascript
javaScript对文字按照拼音排序实现代码
2013/12/27 Javascript
JS获取几种URL地址的方法小结
2014/02/26 Javascript
javascript使用appendChild追加节点实例
2015/01/12 Javascript
jQuery中Ajax的get、post等方法详解
2015/01/20 Javascript
使用JavaScript+canvas实现图片裁剪
2015/01/30 Javascript
Node.js程序中的本地文件操作用法小结
2016/03/06 Javascript
Vue数据驱动模拟实现1
2017/01/11 Javascript
AngularJS之页面跳转Route实例代码
2017/03/10 Javascript
详解Vue2+Echarts实现多种图表数据可视化Dashboard(附源码)
2017/03/21 Javascript
微信小程序列表渲染功能之列表下拉刷新及上拉加载的实现方法分析
2017/11/27 Javascript
vue watch监听对象及对应值的变化详解
2018/02/24 Javascript
浅谈Vue路由快照实现思路及其问题
2018/06/07 Javascript
[01:24:16]2018DOTA2亚洲邀请赛 4.6 全明星赛
2018/04/10 DOTA
python文件和目录操作方法大全(含实例)
2014/03/12 Python
Python多线程编程(一):threading模块综述
2015/04/05 Python
用Python解析XML的几种常见方法的介绍
2015/04/09 Python
Python函数参数类型*、**的区别
2015/04/11 Python
浅谈Python爬取网页的编码处理
2016/11/04 Python
python pandas中对Series数据进行轴向连接的实例
2018/06/08 Python
Python不使用int()函数把字符串转换为数字的方法
2018/07/09 Python
对python读取zip压缩文件里面的csv数据实例详解
2019/02/08 Python
Python实现Event回调机制的方法
2019/02/13 Python
Python3网络爬虫开发实战之极验滑动验证码的识别
2019/08/02 Python
Python分割训练集和测试集的方法示例
2019/09/19 Python
私有程序集与共享程序集有什么区别
2013/04/05 面试题
写给女生的道歉信
2014/01/08 职场文书
2014年超市工作总结
2014/11/19 职场文书
努力工作保证书
2015/02/28 职场文书
六一儿童节致辞
2015/07/31 职场文书
关于@OnetoMany关系映射的排序问题,使用注解@OrderBy
2021/12/06 Java/Android