python读取几个G的csv文件方法


Posted in Python onJanuary 07, 2019

如下所示:

import pandas as pd
file = pd.read_csv('file.csv',iterator=True)
while True:
  chunk = file.get_chunk(1000)
  print(chunk.head(10))
  print(chunk.tail(10))

以上这篇python读取几个G的csv文件方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
教你安装python Django(图文)
Nov 04 Python
Python内置函数OCT详解
Nov 09 Python
Python基于identicon库创建类似Github上用的头像功能
Sep 25 Python
Pandas实现数据类型转换的一些小技巧汇总
May 07 Python
解决django同步数据库的时候app models表没有成功创建的问题
Aug 09 Python
Django 简单实现分页与搜索功能的示例代码
Nov 07 Python
pytorch实现focal loss的两种方式小结
Jan 02 Python
Scrapy框架基本命令与settings.py设置
Feb 06 Python
Java Spring项目国际化(i18n)详细方法与实例
Mar 20 Python
利用python生成照片墙的示例代码
Apr 09 Python
Python中的面向接口编程示例详解
Jan 17 Python
90行Python代码开发个人云盘应用
Apr 20 Python
实时获取Python的print输出流方法
Jan 07 #Python
Python 运行 shell 获取输出结果的实例
Jan 07 #Python
在python 中实现运行多条shell命令
Jan 07 #Python
Python之使用adb shell命令启动应用的方法详解
Jan 07 #Python
python 对多个csv文件分别进行处理的方法
Jan 07 #Python
python 同时运行多个程序的实例
Jan 07 #Python
python实现将多个文件分配到多个文件夹的方法
Jan 07 #Python
You might like
1亿条数据如何分表100张到Mysql数据库中(PHP)
2015/07/29 PHP
全面解析PHP验证码的实现原理 附php验证码小案例
2016/08/17 PHP
PHP简单检测网址是否能够正常打开的方法
2016/09/04 PHP
php封装的图片(缩略图)处理类完整实例
2016/10/19 PHP
PHP批量获取网页中所有固定种子链接的方法
2016/11/18 PHP
javascript 最常用的10个自定义函数[推荐]
2009/12/26 Javascript
jquery聚焦文本框与扩展文本框聚焦方法
2012/10/12 Javascript
js获取鼠标点击的对象,点击另一个按钮删除该对象的实现代码
2016/05/13 Javascript
jQuery解决input元素的blur事件和其他非表单元素的click事件冲突问题
2016/08/15 Javascript
简洁实用的BootStrap jQuery手风琴插件
2016/08/31 Javascript
BooStrap对导航条的改造实践小结
2016/09/21 Javascript
详解MVC如何使用开源分页插件(shenniu.pager.js)
2016/12/16 Javascript
微信小程序左滑删除效果的实现代码
2017/02/20 Javascript
js鼠标经过tab选项卡时实现切换延迟
2017/03/24 Javascript
jQuery源码解读之extend()与工具方法、实例方法详解
2017/03/30 jQuery
JS正则验证多个邮箱完整实例【邮箱用分号隔开】
2017/04/19 Javascript
深究AngularJS如何获取input的焦点(自定义指令)
2017/06/12 Javascript
vue.js学习之vue-cli定制脚手架详解
2017/07/02 Javascript
jquery插件canvaspercent.js实现百分比圆饼效果
2017/07/18 jQuery
JavaScript this使用方法图解
2020/02/04 Javascript
jquery传参及获取方式(两种方式)
2020/02/13 jQuery
解决vue 退出动画无效的问题
2020/08/09 Javascript
[02:09]DOTA2辉夜杯 EHOME夺冠举杯现场
2015/12/28 DOTA
在Linux系统上部署Apache+Python+Django+MySQL环境
2015/12/24 Python
Jupyter中直接显示Matplotlib的图形方法
2018/05/24 Python
python实现抖音视频批量下载
2018/06/20 Python
提升Python程序性能的7个习惯
2019/04/14 Python
python 处理微信对账单数据的实例代码
2019/07/19 Python
PyCharm如何导入python项目的方法
2020/02/06 Python
5 分钟读懂Python 中的 Hook 钩子函数
2020/12/09 Python
精选奢华:THE LIST
2019/09/05 全球购物
写求职信有什么意义
2014/02/17 职场文书
法院授权委托书范文
2014/08/02 职场文书
三好学生个人总结
2015/02/15 职场文书
接触艺术对孩子学习思维有益
2019/08/06 职场文书
Pytorch 如何实现LSTM时间序列预测
2021/05/17 Python