python读取几个G的csv文件方法


Posted in Python onJanuary 07, 2019

如下所示:

import pandas as pd
file = pd.read_csv('file.csv',iterator=True)
while True:
  chunk = file.get_chunk(1000)
  print(chunk.head(10))
  print(chunk.tail(10))

以上这篇python读取几个G的csv文件方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
利用Python演示数型数据结构的教程
Apr 03 Python
通过mod_python配置运行在Apache上的Django框架
Jul 22 Python
python 3.6.4 安装配置方法图文教程
Sep 18 Python
python多线程下信号处理程序示例
May 31 Python
python射线法判断一个点在图形区域内外
Jun 28 Python
Python获取命令实时输出-原样彩色输出并返回输出结果的示例
Jul 11 Python
python+numpy实现的基本矩阵操作示例
Jul 19 Python
详解Python并发编程之从性能角度来初探并发编程
Aug 23 Python
Python json模块与jsonpath模块区别详解
Mar 05 Python
150行python代码实现贪吃蛇游戏
Apr 24 Python
python录音并调用百度语音识别接口的示例
Dec 01 Python
pycharm 复制代码出现空格的解决方式
Jan 15 Python
实时获取Python的print输出流方法
Jan 07 #Python
Python 运行 shell 获取输出结果的实例
Jan 07 #Python
在python 中实现运行多条shell命令
Jan 07 #Python
Python之使用adb shell命令启动应用的方法详解
Jan 07 #Python
python 对多个csv文件分别进行处理的方法
Jan 07 #Python
python 同时运行多个程序的实例
Jan 07 #Python
python实现将多个文件分配到多个文件夹的方法
Jan 07 #Python
You might like
提问的智慧(2)
2006/10/09 PHP
thinkphp框架使用JWTtoken的方法详解
2019/10/10 PHP
ExtJs grid行 右键菜单的两种方法
2010/06/19 Javascript
setTimeout的延时为0时多个浏览器的区别
2012/05/23 Javascript
基于jquery实现的省市区级联无ajax
2013/09/24 Javascript
JS动态增加删除UL节点LI及相关内容示例
2014/05/21 Javascript
javascript实现根据3原色制作颜色选择器的方法
2015/07/17 Javascript
基于JavaScript实现TAB标签效果
2016/01/12 Javascript
javascript实现瀑布流加载图片原理
2016/02/02 Javascript
Jquery组件easyUi实现选项卡切换示例
2016/08/23 Javascript
详解百度百科目录导航树小插件
2017/01/08 Javascript
jQuery实现遍历复选框的方法示例
2017/03/06 Javascript
详解Windows下安装Nodejs步骤
2017/05/18 NodeJs
Vue指令v-for遍历输出JavaScript数组及json对象的常见方式小结
2019/02/11 Javascript
vue中实现Monaco Editor自定义提示功能
2019/07/05 Javascript
jQuery实现轮播图效果
2019/11/26 jQuery
[01:48]2018DOTA2亚洲邀请赛主赛事第二日五佳镜头 VG完美团战逆转TNC
2018/04/05 DOTA
Python打包文件夹的方法小结(zip,tar,tar.gz等)
2016/09/18 Python
python实现写数字文件名的递增保存文件方法
2018/10/25 Python
在python下读取并展示raw格式的图片实例
2019/01/24 Python
pyqt5 实现 下拉菜单 + 打开文件的示例代码
2019/06/20 Python
python2和python3应该学哪个(python3.6与python3.7的选择)
2019/10/01 Python
python numpy 反转 reverse示例
2019/12/04 Python
英国当代时尚和街头服饰店:18montrose
2018/12/15 全球购物
武汉瑞得软件笔试题
2015/10/27 面试题
毕业生找工作的自我评价
2013/10/18 职场文书
大学校园毕业自我鉴定
2014/01/15 职场文书
顶碗少年教学反思
2014/02/21 职场文书
公司2014年度工作总结
2014/12/10 职场文书
家长学校教学计划
2015/01/19 职场文书
交通安全主题班会
2015/08/12 职场文书
青年岗位能手事迹材料(2016推荐版)
2016/03/01 职场文书
PHP连接MSSQL数据库案例,PHPWAMP多个PHP版本连接SQL Server数据库
2021/04/16 PHP
Redis集群的关闭与重启操作
2021/07/07 Redis
nginx实现动静分离的方法示例
2021/11/07 Servers
Redis Stream类型的使用详解
2021/11/11 Redis