python读取几个G的csv文件方法


Posted in Python onJanuary 07, 2019

如下所示:

import pandas as pd
file = pd.read_csv('file.csv',iterator=True)
while True:
  chunk = file.get_chunk(1000)
  print(chunk.head(10))
  print(chunk.tail(10))

以上这篇python读取几个G的csv文件方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
简单介绍使用Python解析并修改XML文档的方法
Oct 15 Python
django+js+ajax实现刷新页面的方法
May 22 Python
Python 逐行分割大txt文件的方法
Oct 10 Python
scrapy spider的几种爬取方式实例代码
Jan 25 Python
python爬虫 模拟登录人人网过程解析
Jul 31 Python
Python基于WordCloud制作词云图
Nov 29 Python
Django REST Swagger实现指定api参数
Jul 07 Python
解析python 类方法、对象方法、静态方法
Aug 15 Python
DRF框架API版本管理实现方法解析
Aug 21 Python
python自动化测试三部曲之request+django实现接口测试
Oct 07 Python
Python jieba库分词模式实例用法
Jan 13 Python
Python爬虫之用Xpath获取关键标签实现自动评论盖楼抽奖(二)
Jun 07 Python
实时获取Python的print输出流方法
Jan 07 #Python
Python 运行 shell 获取输出结果的实例
Jan 07 #Python
在python 中实现运行多条shell命令
Jan 07 #Python
Python之使用adb shell命令启动应用的方法详解
Jan 07 #Python
python 对多个csv文件分别进行处理的方法
Jan 07 #Python
python 同时运行多个程序的实例
Jan 07 #Python
python实现将多个文件分配到多个文件夹的方法
Jan 07 #Python
You might like
php通过文件头检测文件类型通用代码类(zip,rar等)
2010/10/19 PHP
PHP基础知识回顾
2012/08/16 PHP
浅谈ThinkPHP的URL重写
2014/11/25 PHP
Laravel 修改验证异常的响应格式实例代码详解
2020/05/25 PHP
理解Javascript_05_原型继承原理
2010/10/13 Javascript
对xmlHttp对象方法和属性的理解
2011/01/17 Javascript
jQuery获取文本节点之 text()/val()/html() 方法区别
2011/03/01 Javascript
jquery将一个表单序列化为一个对象的方法
2013/12/02 Javascript
js 3秒后跳转页面的实现代码
2014/03/10 Javascript
检测一个函数是否是JavaScript原生函数的小技巧
2015/03/13 Javascript
jquery ztree异步搜索(搜叶子)实践
2016/02/25 Javascript
基于javascript实现页面加载loading效果
2020/09/15 Javascript
把多个JavaScript函数绑定到onload事件处理函数上的方法
2016/09/04 Javascript
微信小程序 开发工具快捷键整理
2016/10/31 Javascript
Bootstrap modal 多弹窗之叠加关闭阴影遮罩问题的解决方法
2017/02/27 Javascript
js实现3D图片环展示效果
2017/03/09 Javascript
Vue2.0 从零开始_环境搭建操作步骤
2017/06/14 Javascript
微信小程序滑动选择器的实现代码
2018/08/10 Javascript
JS实现匀速与减速缓慢运动的动画效果封装示例
2018/08/27 Javascript
利用jqgrid实现上移下移单元格功能
2018/11/07 Javascript
webpack file-loader和url-loader的区别
2019/01/15 Javascript
微信小程序mpvue点击按钮获取button值的方法
2019/05/29 Javascript
uniapp实现横向滚动选择日期
2020/10/21 Javascript
js实现简单的轮播图效果
2020/12/13 Javascript
Python写的一个简单DNS服务器实例
2014/06/04 Python
Python中用于去除空格的三个函数的使用小结
2015/04/07 Python
Django实现微信小程序的登录验证功能并维护登录态
2019/07/04 Python
Oroton中国官网:澳洲知名奢侈配饰品牌
2017/03/26 全球购物
男女钓鱼靴和甲板鞋:XTRATUF
2021/01/09 全球购物
英国户外服装、鞋类和设备的领先零售商:Millets
2020/10/12 全球购物
文秘自荐信
2013/10/20 职场文书
销售员个人求职的自我评价
2014/02/10 职场文书
公司领导班子群众路线四风问题对照检查材料
2014/10/02 职场文书
巾帼文明岗事迹材料
2014/12/24 职场文书
2015年学校党建工作总结
2015/05/19 职场文书
七年级话题作文之执着
2019/11/19 职场文书