Python 文件数据读写的具体实现


Posted in Python onJanuary 24, 2020

文件数据读写

读写文件,本质上是请求操作系统打开一个文件对象,然后,通过操作系统提供的接口从这个文件对象中读取数据(读文件),或者把数据写入这个文件对象(写文件)。

文件读取

使用 Python 内置 open() 函数,以 rt 的模式读取文件,如下示例:

>>> f = open('some.txt', 'rt')

这行代码就表示打开一个文件,若是文件不存在,会抛出 IOError 的异常,并给出详细的信息提示:

>>> f = open('undefined.txt', 'rt')
Traceback (most recent call last):
 File "<stdin>", line 1, in <module>
FileNotFoundError: [Errno 2] No such file or directory: 'undefined.txt'

当成功打开文件时,可使用 read() 函数读取文件的内容:

>>> f.read()
'Hello world!'

当数据读取完毕后,需要调用 close() 关闭文件。因为文件对象会占用资源,使用完毕后需要及时关闭释放资源。

>>> f.close()

还有一种方法就是使用 with 语句,给被使用的文件创建一个上下文环境,这样文件对象就能够自动关闭。

>>> with open('some.txt', 'rt') as f:
...   data = f.read()
...

调用 read() 时一次性读取全部内容,若是文件内容过大,可以使用 read(size) 固定大小循环读取,每次最多读取 size 字节的内容。readline() 函数,每次读取一行内容,readlines() 读取所有内容,但是按行返回 list。三者的使用,可根据实际的需求进行选择。

二进制文件

读取二进制的文件,需要使用 rb 的模式打开:

>>> f = open('image.jpg', 'rb')
>>> f.read()
b'\xff\xd8\xff\xe0\x00\x10JFIF\x00...'

从文件中读取数据,需要注意编码的问题。当编码错误时,会抛出 UnicodeDecodeError 异常。比如:

>>> f = open('some.txt', 'rt', encoding='ascii')
>>> f.read()
Traceback (most recent call last):
 File "<stdin>", line 1, in <module>
 File "/usr/local/lib/python3.6/encodings/ascii.py", line 26, in decode    
  return codecs.ascii_decode(input, self.errors)[0]
UnicodeDecodeError: 'ascii' codec can't decode byte 0xcc in position 2: ordinal not in range(128)

这种情况下,通常为读取文本指定的编码不正确,需要确认文件编码是否正确。如果编码错误还是存在的话,可以给 open() 函数传递一个可选的 errors 参数来处理这些错误。比如:

>>> f = open('some.txt', 'rt', encoding='ascii', errors='replace') 
>>> f.read()
'Un��ic��o��de��'
>>> f = open('some.txt', 'rt', encoding='ascii', errors='ignore') 
>>> f.read()
'Unicode'

使用参数 errors 能够处理编码错误的问题,但是过程会觉得非常糟糕。这里提倡的是确保使用的是正确的编码。模棱两可的时候,使用默认的设置(通常是 UTF-8)。

压缩文件

读取 gzip 和 bz2 格式的压缩文件时,可以使用 gzip 和 bz2 模块。两个模块都为 open() 提供了另外的实现来解决读取 gzip 和 bz2 两个格式的压缩文件的问题。例如读取压缩文件,示例如下:

>>> import gzip
>>> with gzip.open('some.gz', 'rt') as f: 
...   text=f.read()
   
>>> import bz2
>>> with bz2.open('some.bz2', 'rt') as f:
...   text=f.read()

文件写入

文件写入,同样需要调用 open() 参数,但是指定的模式为 wt 或者 wb,用以表示写文本文件或是二进制文件:

>>> f = open('some.txt', 'wt')
>>> f.write('Hello, world!')
13
>>> f.close()

数据写入完毕,同样需要调用 close() 关闭文件对象。也可以 with 语句创建上下文,用以正常关闭文件对象。

类似的,写入压缩数据时,导入 gzip 或者 bz2 模块:

>>> import gzip
>>> with gzip.open('some.gz', 'wt') as f: 
...   f.write(text)
   
>>> import bz2
>>> with bz2.open('some.bz2', 'wt') as f:
...   f.write(text)

写入压缩数据时,可选参数 compresslevel 可以指定一个压缩等级。例如:

>>> with gzip.open('some.gz', 'wt', compresslevel=6) as f:
...   f.write(text)

compresslevel 参数默认值为 9,表示最高的压缩等级。等级越低性能越好,但是压缩程度也就越低。

使用 w 模式的 open() 函数,若打开的文件在写入前有数据内容,则会被清除覆盖。如果是要在已经存在的文件中添加内容的话,使用模式为 at 的 open() 函数。

涉及读写文件模式的定义及含义,内容如下:

模式 含义
'r' 读取数据(默认)
'w' 写入数据
'x' 文件存在抛出异常,不存在则创建
'a' 追加写入数据
'b' 二进制模式
't' 文本模式(默认)
'+' 更新文件(读写)

具体更详细的内容可以参考 Python 官方文档。

参考资料

来源
David M. Beazley;Brian K. Jones.Python Cookbook, 3rd Edtioni.O'Reilly Media.2013.
Luciano Ramalho.Fluent Python.O'Reilly Media.2015.
“2. Built-in Functions”.docs.python.org.Retrieved 20 January 2020.
"gzip — Support for gzip files".docs.python.org.Retrieved 22 January 2020.
"bz2 — Support for bzip2 compression".docs.python.org.Retrieved 22 January 2020.
廖雪峰.“Python 教程”.liaoxuefeng.com.[2020-01-18].

以上为本篇的主要内容。希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
举例讲解Python编程中对线程锁的使用
Jul 12 Python
使用Python对SQLite数据库操作
Apr 06 Python
python机器学习实战之最近邻kNN分类器
Dec 20 Python
利用scrapy将爬到的数据保存到mysql(防止重复)
Mar 31 Python
django 外键model的互相读取方法
Dec 15 Python
Python操作rabbitMQ的示例代码
Mar 19 Python
基于腾讯云服务器部署微信小程序后台服务(Python+Django)
May 08 Python
对python中的控制条件、循环和跳出详解
Jun 24 Python
python交易记录整合交易类详解
Jul 03 Python
Python使用lambda表达式对字典排序操作示例
Jul 25 Python
python中numpy.empty()函数实例讲解
Feb 05 Python
Python初识逻辑与if语句及用法大全
Aug 07 Python
利用keras加载训练好的.H5文件,并实现预测图片
Jan 24 #Python
keras模型可视化,层可视化及kernel可视化实例
Jan 24 #Python
keras 特征图可视化实例(中间层)
Jan 24 #Python
基于keras输出中间层结果的2种实现方式
Jan 24 #Python
tensorflow 保存模型和取出中间权重例子
Jan 24 #Python
tensorflow 模型权重导出实例
Jan 24 #Python
在Tensorflow中查看权重的实现
Jan 24 #Python
You might like
PHP 高级课程笔记 面向对象
2009/06/21 PHP
PHP中利用substr_replace将指定两位置之间的字符替换为*号
2011/01/27 PHP
PHP中用hash实现的数组
2011/07/17 PHP
/etc/php-fpm.d/www.conf 配置注意事项
2017/02/04 PHP
PHP设计模式之建造者模式(Builder)原理与用法案例详解
2019/12/12 PHP
JavaScript表单通过正则表达式验证电话号码
2014/03/14 Javascript
关于数据与后端进行交流匹配(点亮星星)
2016/08/03 Javascript
JavaScript制作颜色反转小游戏
2016/09/25 Javascript
炫酷的js手风琴效果
2016/10/13 Javascript
AngularJS 应用身份认证的技巧总结
2016/11/07 Javascript
javascript 利用arguments实现可变长参数
2016/11/21 Javascript
EsLint入门学习教程
2017/02/17 Javascript
使用JSON格式提交数据到服务端的实例代码
2018/04/01 Javascript
富文本编辑器vue2-editor实现全屏功能
2019/05/26 Javascript
详解基于原生JS验证表单组件xy-form
2019/08/20 Javascript
微信小程序实现音乐播放页面布局
2020/12/11 Javascript
[41:52]2018DOTA2亚洲邀请赛3月29日 小组赛A组 TNC VS OpTic
2018/03/30 DOTA
Python 错误和异常小结
2013/10/09 Python
在Python中封装GObject模块进行图形化程序编程的教程
2015/04/14 Python
Python基于ThreadingTCPServer创建多线程代理的方法示例
2018/01/11 Python
python实现Decorator模式实例代码
2018/02/09 Python
python微信撤回监测代码
2019/04/29 Python
Python 中的 global 标识对变量作用域的影响
2019/08/12 Python
Tensorflow实现部分参数梯度更新操作
2020/01/23 Python
Python 从attribute到property详解
2020/03/05 Python
pytorch随机采样操作SubsetRandomSampler()
2020/07/07 Python
5分钟实现Canvas鼠标跟随动画背景
2019/11/18 HTML / CSS
中医专业职业生涯规划书范文
2014/01/04 职场文书
财务情况说明书范文
2014/05/06 职场文书
群教个人对照检查材料
2014/08/20 职场文书
2014年计划生育协会工作总结
2014/11/14 职场文书
Python中threading库实现线程锁与释放锁
2021/05/17 Python
Matplotlib绘制混淆矩阵的实现
2021/05/27 Python
SpringBoot项目中控制台日志的保存配置操作
2021/06/18 Java/Android
Java 深入探究讲解简单工厂模式
2022/04/07 Java/Android
使用Mysql计算地址的经纬度距离和实时位置信息
2022/04/29 MySQL