Python 文件数据读写的具体实现


Posted in Python onJanuary 24, 2020

文件数据读写

读写文件,本质上是请求操作系统打开一个文件对象,然后,通过操作系统提供的接口从这个文件对象中读取数据(读文件),或者把数据写入这个文件对象(写文件)。

文件读取

使用 Python 内置 open() 函数,以 rt 的模式读取文件,如下示例:

>>> f = open('some.txt', 'rt')

这行代码就表示打开一个文件,若是文件不存在,会抛出 IOError 的异常,并给出详细的信息提示:

>>> f = open('undefined.txt', 'rt')
Traceback (most recent call last):
 File "<stdin>", line 1, in <module>
FileNotFoundError: [Errno 2] No such file or directory: 'undefined.txt'

当成功打开文件时,可使用 read() 函数读取文件的内容:

>>> f.read()
'Hello world!'

当数据读取完毕后,需要调用 close() 关闭文件。因为文件对象会占用资源,使用完毕后需要及时关闭释放资源。

>>> f.close()

还有一种方法就是使用 with 语句,给被使用的文件创建一个上下文环境,这样文件对象就能够自动关闭。

>>> with open('some.txt', 'rt') as f:
...   data = f.read()
...

调用 read() 时一次性读取全部内容,若是文件内容过大,可以使用 read(size) 固定大小循环读取,每次最多读取 size 字节的内容。readline() 函数,每次读取一行内容,readlines() 读取所有内容,但是按行返回 list。三者的使用,可根据实际的需求进行选择。

二进制文件

读取二进制的文件,需要使用 rb 的模式打开:

>>> f = open('image.jpg', 'rb')
>>> f.read()
b'\xff\xd8\xff\xe0\x00\x10JFIF\x00...'

从文件中读取数据,需要注意编码的问题。当编码错误时,会抛出 UnicodeDecodeError 异常。比如:

>>> f = open('some.txt', 'rt', encoding='ascii')
>>> f.read()
Traceback (most recent call last):
 File "<stdin>", line 1, in <module>
 File "/usr/local/lib/python3.6/encodings/ascii.py", line 26, in decode    
  return codecs.ascii_decode(input, self.errors)[0]
UnicodeDecodeError: 'ascii' codec can't decode byte 0xcc in position 2: ordinal not in range(128)

这种情况下,通常为读取文本指定的编码不正确,需要确认文件编码是否正确。如果编码错误还是存在的话,可以给 open() 函数传递一个可选的 errors 参数来处理这些错误。比如:

>>> f = open('some.txt', 'rt', encoding='ascii', errors='replace') 
>>> f.read()
'Un��ic��o��de��'
>>> f = open('some.txt', 'rt', encoding='ascii', errors='ignore') 
>>> f.read()
'Unicode'

使用参数 errors 能够处理编码错误的问题,但是过程会觉得非常糟糕。这里提倡的是确保使用的是正确的编码。模棱两可的时候,使用默认的设置(通常是 UTF-8)。

压缩文件

读取 gzip 和 bz2 格式的压缩文件时,可以使用 gzip 和 bz2 模块。两个模块都为 open() 提供了另外的实现来解决读取 gzip 和 bz2 两个格式的压缩文件的问题。例如读取压缩文件,示例如下:

>>> import gzip
>>> with gzip.open('some.gz', 'rt') as f: 
...   text=f.read()
   
>>> import bz2
>>> with bz2.open('some.bz2', 'rt') as f:
...   text=f.read()

文件写入

文件写入,同样需要调用 open() 参数,但是指定的模式为 wt 或者 wb,用以表示写文本文件或是二进制文件:

>>> f = open('some.txt', 'wt')
>>> f.write('Hello, world!')
13
>>> f.close()

数据写入完毕,同样需要调用 close() 关闭文件对象。也可以 with 语句创建上下文,用以正常关闭文件对象。

类似的,写入压缩数据时,导入 gzip 或者 bz2 模块:

>>> import gzip
>>> with gzip.open('some.gz', 'wt') as f: 
...   f.write(text)
   
>>> import bz2
>>> with bz2.open('some.bz2', 'wt') as f:
...   f.write(text)

写入压缩数据时,可选参数 compresslevel 可以指定一个压缩等级。例如:

>>> with gzip.open('some.gz', 'wt', compresslevel=6) as f:
...   f.write(text)

compresslevel 参数默认值为 9,表示最高的压缩等级。等级越低性能越好,但是压缩程度也就越低。

使用 w 模式的 open() 函数,若打开的文件在写入前有数据内容,则会被清除覆盖。如果是要在已经存在的文件中添加内容的话,使用模式为 at 的 open() 函数。

涉及读写文件模式的定义及含义,内容如下:

模式 含义
'r' 读取数据(默认)
'w' 写入数据
'x' 文件存在抛出异常,不存在则创建
'a' 追加写入数据
'b' 二进制模式
't' 文本模式(默认)
'+' 更新文件(读写)

具体更详细的内容可以参考 Python 官方文档。

参考资料

来源
David M. Beazley;Brian K. Jones.Python Cookbook, 3rd Edtioni.O'Reilly Media.2013.
Luciano Ramalho.Fluent Python.O'Reilly Media.2015.
“2. Built-in Functions”.docs.python.org.Retrieved 20 January 2020.
"gzip — Support for gzip files".docs.python.org.Retrieved 22 January 2020.
"bz2 — Support for bzip2 compression".docs.python.org.Retrieved 22 January 2020.
廖雪峰.“Python 教程”.liaoxuefeng.com.[2020-01-18].

以上为本篇的主要内容。希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python 布尔操作实现代码
Mar 23 Python
python字典get()方法用法分析
Apr 17 Python
使用Nginx+uWsgi实现Python的Django框架站点动静分离
Mar 21 Python
Python开发微信公众平台的方法详解【基于weixin-knife】
Jul 08 Python
详解如何利用Cython为Python代码加速
Jan 27 Python
Python多层装饰器用法实例分析
Feb 09 Python
matplotlib给子图添加图例的方法
Aug 03 Python
python中scikit-learn机器代码实例
Aug 05 Python
在python中对变量判断是否为None的三种方法总结
Jan 23 Python
python实现统计文本中单词出现的频率详解
May 20 Python
浅谈Python线程的同步互斥与死锁
Mar 22 Python
Python 使用xlwt模块将多行多列数据循环写入excel文档的操作
Nov 10 Python
利用keras加载训练好的.H5文件,并实现预测图片
Jan 24 #Python
keras模型可视化,层可视化及kernel可视化实例
Jan 24 #Python
keras 特征图可视化实例(中间层)
Jan 24 #Python
基于keras输出中间层结果的2种实现方式
Jan 24 #Python
tensorflow 保存模型和取出中间权重例子
Jan 24 #Python
tensorflow 模型权重导出实例
Jan 24 #Python
在Tensorflow中查看权重的实现
Jan 24 #Python
You might like
php与php MySQL 之间的关系
2009/07/17 PHP
php强制下载类型的实现代码
2011/04/21 PHP
php递归调用删除数组空值元素的方法
2015/04/28 PHP
PHP实现的简单分页类及用法示例
2016/05/06 PHP
PHP将URL转换成短网址的算法分享
2016/09/13 PHP
如何使用php等比例缩放图片
2016/10/12 PHP
深入讲解PHP的对象注入(Object Injection)
2017/03/01 PHP
PHP基于DOMDocument解析和生成xml的方法分析
2017/07/17 PHP
jQuery的实现原理的模拟代码 -3 事件处理
2010/08/03 Javascript
如何确保JavaScript的执行顺序 之jQuery.html深度分析
2011/03/03 Javascript
另一个javascript小测验(代码集合)
2011/07/27 Javascript
一个基于jQuery的树型插件(OrangeTree)使用介绍
2012/05/03 Javascript
jquery 插件实现瀑布流图片展示实例
2015/04/03 Javascript
HTML+CSS+JS实现完美兼容各大浏览器的TABLE固定列
2015/04/26 Javascript
js实现将选中内容分享到新浪或腾讯微博
2015/12/16 Javascript
javascript拖拽应用实例(二)
2016/03/25 Javascript
JavaScript表单验证开发
2016/11/23 Javascript
使用JS读取XML文件的方法
2016/11/25 Javascript
详解javascript立即执行函数表达式IIFE
2017/02/13 Javascript
[01:54]TI珍贵瞬间系列(五):压力
2020/08/29 DOTA
Python学习小技巧之列表项的推导式与过滤操作
2017/05/20 Python
Python在不同目录下导入模块的实现方法
2017/10/27 Python
Python 用三行代码提取PDF表格数据
2019/10/13 Python
如何更改 pandas dataframe 中两列的位置
2019/12/27 Python
python实现跨年表白神器--你值得拥有
2021/01/04 Python
html5的canvas实现3d雪花飘舞效果
2013/12/27 HTML / CSS
Ibood荷兰:互联网每日最佳在线优惠
2019/02/28 全球购物
全球性的在线商店:Vogca
2019/05/10 全球购物
编辑硕士自荐信范文
2013/11/27 职场文书
工会工作先进事迹
2014/08/18 职场文书
干部对照检查材料范文
2014/08/26 职场文书
2014年药房工作总结
2014/11/22 职场文书
运动会100米广播稿
2015/08/19 职场文书
Vue实现下拉加载更多
2021/05/09 Vue.js
python开发飞机大战游戏
2021/07/15 Python
使用CSS连接数据库的方式
2022/02/28 HTML / CSS