python读取几个G的csv文件方法


Posted in Python onJanuary 07, 2019

如下所示:

import pandas as pd
file = pd.read_csv('file.csv',iterator=True)
while True:
  chunk = file.get_chunk(1000)
  print(chunk.head(10))
  print(chunk.tail(10))

以上这篇python读取几个G的csv文件方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python使用PyGame播放Midi和Mp3文件的方法
Apr 24 Python
python中函数传参详解
Jul 03 Python
Python调用C++程序的方法详解
Jan 24 Python
python生成式的send()方法(详解)
May 08 Python
Python实现PS滤镜特效之扇形变换效果示例
Jan 26 Python
flask中的wtforms使用方法
Jul 21 Python
python进阶之多线程对同一个全局变量的处理方法
Nov 09 Python
pytorch获取vgg16-feature层输出的例子
Aug 20 Python
python实现统计代码行数的小工具
Sep 19 Python
教你如何用python操作摄像头以及对视频流的处理
Oct 12 Python
Python生成pdf目录书签的实例方法
Oct 29 Python
python文件目录操作之os模块
May 08 Python
实时获取Python的print输出流方法
Jan 07 #Python
Python 运行 shell 获取输出结果的实例
Jan 07 #Python
在python 中实现运行多条shell命令
Jan 07 #Python
Python之使用adb shell命令启动应用的方法详解
Jan 07 #Python
python 对多个csv文件分别进行处理的方法
Jan 07 #Python
python 同时运行多个程序的实例
Jan 07 #Python
python实现将多个文件分配到多个文件夹的方法
Jan 07 #Python
You might like
php中文字母数字验证码实现代码
2008/04/25 PHP
php使用function_exists判断函数可用的方法
2014/11/19 PHP
数据结构之利用PHP实现二分搜索树
2020/10/25 PHP
取得窗口大小 兼容所有浏览器的js代码
2011/08/09 Javascript
JavaScript转换农历类实现及调用方法
2013/01/27 Javascript
js去空格技巧分别去字符串前后、左右空格
2013/10/21 Javascript
一个简单的Node.js异步操作管理器分享
2014/04/29 Javascript
一个不错的字符串转码解码函数(自写)
2014/07/31 Javascript
javascript转换静态图片,增加粒子动画效果
2015/05/28 Javascript
js cookie实现记住密码功能
2017/01/17 Javascript
微信小程序 sha1 实现密码加密实例详解
2017/07/06 Javascript
基于Vuejs的搜索匹配功能实现方法
2018/03/03 Javascript
如何为你的JS项目添加智能提示与类型检查详解
2019/03/12 Javascript
[01:10:57]Liquid vs OG 2018国际邀请赛小组赛BO2 第一场 8.16
2018/08/17 DOTA
跟老齐学Python之编写类之二方法
2014/10/11 Python
用Python实现一个简单的多线程TCP服务器的教程
2015/05/05 Python
Python实现的密码强度检测器示例
2017/08/23 Python
python读取一个目录下所有txt里面的内容方法
2018/06/23 Python
windows下python安装小白入门教程
2018/09/18 Python
Python实现统计英文文章词频的方法分析
2019/01/28 Python
python实现数据分析与建模
2019/07/11 Python
Python程序暂停的正常处理方法
2019/11/07 Python
Python xlrd excel文件操作代码实例
2020/03/10 Python
Python 通过监听端口实现唯一脚本运行方式
2020/05/05 Python
如何使用Pytorch搭建模型
2020/10/26 Python
python爬虫线程池案例详解(梨视频短视频爬取)
2021/02/20 Python
CSS3中的弹性布局em运用入门详解 1em等于多少像素
2021/02/08 HTML / CSS
Html5与App的通讯方式详解
2019/10/24 HTML / CSS
《匆匆》教学反思
2014/02/22 职场文书
党员承诺书范文
2014/05/19 职场文书
小学标准化建设汇报材料
2014/08/16 职场文书
2014年乡镇妇联工作总结
2014/12/02 职场文书
大连导游词
2015/02/12 职场文书
管理者日常工作必备:22条企业管理流程模板!
2019/07/12 职场文书
详解python的内存分配机制
2021/05/10 Python
浅谈Java父子类加载顺序
2021/08/04 Java/Android